hadoop - Cloudera CDH4安装

标签 hadoop mapreduce cloudera-cdh

我在CDH4 MRV1安装说明中看到以下步骤:
http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/4.2.0/CDH4-Quick-Start/cdh4qs_topic_3_2.html

步骤4:创建MapReduce系统目录:
须藤-u hdfs hadoop fs -mkdir -p / var / lib / hadoop-hdfs / cache / mapred / mapred / staging
须藤-u hdfs hadoop fs -chmod 1777 / var / lib / hadoop-hdfs / cache / mapred / mapred / staging
须藤-u hdfs hadoop fs -chown -R mapred / var / lib / hadoop-hdfs / cache / mapred

但是我不知道该目录在哪里使用。这些众所周知的位置还是这些目录路径是在某些配置文件中配置的。如果可以,我可以使用我想要的任何结构吗?

最佳答案

这些目录将由MapReduce使用。它们与默认配置中指定的值匹配。除非您有充分的理由,否则我不会更改它们。但是,最后,可以肯定的是,一旦启动并运行,就可以配置其他位置。

关于hadoop - Cloudera CDH4安装,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/21608645/

相关文章:

java - 你如何处理 reducer 中的不同值类型

hadoop - MapReduce 作业无法与启用 Kerberos 的 CDH 集群上的 Hbase 对话

hadoop - 在 hive 中的rank()20M条记录

hadoop - 如何将apache phoenix表/ View 数据提取到文件

java - 将 Apache Spark 添加到 Eclipse Maven 项目时出现问题

hadoop - Sqoop导入无法找到所需的JDBC文件

hadoop - 我可以在不设置mapred.reduce.tasks=1的情况下在mapreduce程序中找到min、max或avg吗

java - apache Storm 如何创建其 Bolt 实现

hadoop - 在cloudera中安装apache hadoop-tools

hadoop - 'prepare'命令和 'safemode'在HDFS滚动升级中的作用