我想在我的 Java 代码中获取一些信息,例如映射输入字节、减少混洗字节等。 Hadoop 作业完成后,这些信息会打印到控制台,但我正在寻找一种方法将它们放入我的代码中?
最佳答案
您正在寻找 Hadoop 计数器。查看http://lintool.github.io/Cloud9/docs/content/counters.html或 Is there a way to access number of successful map tasks from a reduce task in an MR job? .
关于hadoop - 如何在代码中获取 Hadoop 中的统计信息?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/17178588/