hadoop - NodeManager 未在 Hadoop Yarn 中启动

标签 hadoop hadoop-yarn

我现在已经在独立模式下设置了 hadoop 和 yarn。 我正在尝试用 yarn 开始所有过程。除节点管理器外,所有进程都已启动。每次都抛出 jvm 错误。

 [root@ip-10-100-223-16 hadoop-0.23.7]# sbin/yarn-daemon.sh start nodemanager
starting nodemanager, logging to /root/hadoop-0.23.7/logs/yarn-root-nodemanager-ip-10-100-223-16.out
Unrecognized option: -jvm
Error: Could not create the Java Virtual Machine.
Error: A fatal exception has occurred. Program will exit.

可能是什么问题?感谢您的帮助。

最佳答案

以下链接包含针对上述问题的补丁:https://issues.apache.org/jira/browse/MAPREDUCE-3879

bin/yarn 脚本中,我们需要注释以下行。这里:
'-' : 表示删除行
'+' : 显示添加行

elif [ "$COMMAND" = "nodemanager" ] ; then
   CLASSPATH=${CLASSPATH}:$YARN_CONF_DIR/nm-config/log4j.properties
   CLASS='org.apache.hadoop.yarn.server.nodemanager.NodeManager'
-  if [[ $EUID -eq 0 ]]; then
-    YARN_OPTS="$YARN_OPTS -jvm server $YARN_NODEMANAGER_OPTS"
-  else
-    YARN_OPTS="$YARN_OPTS -server $YARN_NODEMANAGER_OPTS"
-  fi
+  YARN_OPTS="$YARN_OPTS -server $YARN_NODEMANAGER_OPTS"
 elif [ "$COMMAND" = "proxyserver" ] ; then
   CLASS='org.apache.hadoop.yarn.server.webproxy.WebAppProxyServer'
   YARN_OPTS="$YARN_OPTS $YARN_PROXYSERVER_OPTS"

以上补丁可在 this 上获得地点。

礼貌 LorandBendig感谢帮助我。

关于hadoop - NodeManager 未在 Hadoop Yarn 中启动,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16214649/

相关文章:

hadoop - 如何在 Scalding 中一次对多列进行平均?

hadoop - JVM 重用 MapReduce 2.0 YARN

hadoop-yarn - 无法在亚马逊 emr 中使用 apache flink

hadoop - 在 YARN 集群的特定节点上运行我自己的 application master

apache-spark - 如何根据数据大小重新分区rdd

c++ - 如何在 Windows 中为 C++ 安装 hadoop?

hadoop - 使用 OpenNLP (tNER) 和 Hadoop 不返回跨度

hadoop - Spark + yarn 簇: how can i configure physical node to run only one executor\task each time?

hadoop - 为什么 YARN 作业不转换到 RUNNING 状态?

shell - hdfs 删除超过 7 天的目录