hadoop - 检查并验证Hadoop mapreduce中的节点数?

标签 hadoop mapreduce task nodes jobs

我怎么知道工作完成后,该工作上实际运行了多少个节点,多少个映射任务以及多少个简化任务?

谢谢....

最佳答案

您可以使用jobtracker UI进行相同操作。它默认在50030上运行,URL看起来像http://myhost:50030/.
到那里后,您可以看到您的工作使用了多少个映射器和多少个化简器。您可以通过单击工作链接本身来玩耍。

关于hadoop - 检查并验证Hadoop mapreduce中的节点数?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/28525197/

相关文章:

hadoop - 我需要使用pyspark从RDD过滤掉一些内容

java - hadoop fs -mkdir 没有创建所需的文件夹

hadoop - 在map/reduce中如何实现排序和排序?

hadoop - 我有CSV和TSV的10个文件。我想使用Apache Hadoop中的MapReduce获得输出什么是CSV和TSV数据

c# - “任务”不包含 C# 的 'CompletedTask' 的定义

asp.net - Windows Azure 启动任务未触发

map - Hadoop:映射器没有从多个输入路径读取文件

hadoop - 如何比较 PIG 中的两个元组?

hadoop - 利用Hadoop的MapReduce中的关系名/表名/文件名

Android 定时器时间表