hadoop - Hadoop:Reducer产生错误

Question

我在reduce阶段继续获得Exceeded MAX_FAILED_UNIQUE_FETCHES。

即使我尝试了所有可以在网上找到的解决方案。

节点:已安装服务

Master_Node:Namenode，JobTracker

配置文件如下:

core-site.xml

<configuration>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/usr/local/hadoop-datastore/hadoop-${user.name}</value>
        <description>Hadoop Data Store</description>
    </property>

    <property>
        <name>fs.default.name</name>
        <value>hdfs://172.16.8.3:54310/</value> 
    </property>
</configuration>

mapred-site.xml

<configuration>
    <property>
        <name>mapred.job.tracker</name>
        <value>172.16.8.3:54311</value>
    </property>
</configuration>

Answer 1

此link似乎表明它可能是网络配置问题。

还原器无法获取映射(由于失败太多尝试)，这可能是由于网络/配置问题而导致无法查询Jetty服务器。

免责声明:我没有专业地使用过Hadoop