hadoop - 在 Mac OS X 上设置 Hadoop 客户端

标签 hadoop osx-mavericks cloudera-cdh

目前,我有一个使用 MRv1 运行 CDH 5.0 的 3 节点集群。我想弄清楚如何在我的 Mac 上设置 Hadoop。所以,我可以向集群提交作业。根据“Managing Hadoop API Dependencies in CDH 5”,你只需要/usr/lib/hadoop/client-0.20/*中的文件我还需要以下文件吗? Cloudera 压缩包中是否有 hadoop-client

- core-site.xml
- hdfs-site.xml
- mapred-site.xml

最佳答案

是的,我知道你可以使用cloudera tarball来设置hadoop客户端,同样可以从以下路径下载,配置文件在Hadoop下的etc/hadoop/目录下,只需要修改那些文件根据您的环境。

http://archive-primary.cloudera.com/cdh5/cdh/5/hadoop-2.2.0-cdh5.0.0-beta-2.tar.gz

如果以上链接与您的版本不匹配,请使用以下链接获取可用的 hadoop 版本

http://archive-primary.cloudera.com/cdh5/cdh/5/

关于hadoop - 在 Mac OS X 上设置 Hadoop 客户端,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23140998/

相关文章:

Java:Hadoop:MapReduce:使用过滤器从 hbase 检索数据,int/string 比较

apache - 在 Mac OS X 10.9 (Mavericks) 中启动内置 Apache 服务器

java - slave VM 从 slaves 列表中删除,并且仍然被 Yarn/Tez 访问

scala - 如何在连接中选择数据框的所有列 - Spark-scala

hadoop - 如何安装Kudu?

hadoop - CDH4:将新节点添加到现有集群

hadoop - Sqoop 2 提供了哪些 Sqoop 1 没有提供的内容?

ruby-on-rails - 安装 pg gem;错误 : Failed to build gem native extension

macos - emacs - 每行的第一个字符从窗口末尾开始

user-interface - 在 Cloudera 中创建表单