hadoop - 纱作业失败，出现ClassNotFound异常，但在HADOOP_CLASSPATH中添加了jar

Question

我对Hive WebHcat和Yarn有一些问题。
当我尝试通过curl在 hive 中创建表格时，例如:

curl -s -d execute="select+*+from+pokes;" \ -d statusdir="pokes.output" \
'http://localhost:50111/templeton/v1/hive?user.name=ekoifman'

https://cwiki.apache.org/confluence/display/Hive/WebHCat+Reference+Hive

和 yarn 容器失败与

Error: java.lang.ClassNotFoundException: org.apache.logging.log4j.spi.LoggerContextFactory

但是所需的jar存在于Hive类路径中，当我启动WebHcat时，我在https://github.com/apache/hive/blob/master/hcatalog/webhcat/svr/src/main/bin/webhcat_server.sh#L211-L215的Hadoop类路径中显式添加了log4j-api-2.4.1.jar

因此，问题是为什么 yarn 容器无法找到降落在 hive 类路径中并明确添加到hadoop_classpath中的jar？

谢谢。

Answer 1

我将在 hive 类路径中已经存在的log4j库添加到yarn类路径后，问题解决了。