java - 带有 Eclipse 的 Hadoop 未连接

标签 java hadoop

我使用的是 ubuntu 12.04。我正在尝试在 eclipse 中连接 hadoop。成功安装了 1.04 的插件。我为此使用 Java 1.7。

我的配置数据是 username:hduser,locationname:test,map/reduce主机端口分别是localhost:9101和M/R masterhost localhost:9100。

我的临时目录是/app/hduser/temp。 根据这个位置,我设置了高级参数。但是我无法设置 fs.s3.buffer.dir,因为没有创建像/app/hadoop/tmp//s3 这样的目录。无法设置映射减少主目录。我只找到本地目录。我没有找到 mapred.jobtracker.persist.job.dir。并映射红色临时目录。

当我在伪分布式模式下运行 hadoop 时,我没有发现任何数据节点也在使用 JPS 运行。

我不确定这里的问题是什么。在 eclipse 中,我在设置 dfs 服务器时遇到了错误。我收到了这样的消息......

发生内部错误:“连接到 DFS 测试”。 组织/apache/commons/配置/配置

谢谢大家

最佳答案

我遇到了同样的问题。后来发现了这个: Hadoop eclipse mapreduce is not working?

主要博文是this . HTH 正在寻找解决方案的人。

关于java - 带有 Eclipse 的 Hadoop 未连接,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15737699/

相关文章:

java - 确保消息的有序处理

Java 模块没有 `api` ,必须使用 `compile` ?

hadoop - Hadoop2 中的 hadoop-test.jar 在哪里?

mysql - Hive 查询给出与 SQL 不同的结果

linux - 如何递归获取目录下所有文件的总大小

java - 在 android studio (1.1.0) 中,如何添加对来自其他来源的 java 文件的依赖?

java - 简单的 Java "Service Provider frameworks"?

apache-spark - spark-submit与我位于hdfs中的jar不兼容

hadoop - pig 非聚合警告输出位置?

java - 基于正则表达式从pdf文件中提取文本?