Hadoop Framework 在本地模拟一个集群

标签 hadoop

是否有任何 Hadoop 框架可以让我在 Linux 或 Windows 机器上本地模拟完整集群? DFS 可以将数据复制到本地,Compute 层可以并行执行吗? 有没有这样或类似的框架?

最佳答案

您可以在一台或多台虚拟机上安装 Hadoop。例如。 Cloudera 提供了一个 downloadable VM预装了它的 Hadoop 发行版

关于Hadoop Framework 在本地模拟一个集群,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/8291220/

相关文章:

hadoop - Hive - 使用不包括行终止符的文本文件创建外部表

java - 映射任务中的 ArrayIndexOutOfBound 异常

hadoop - 嵌入式模式下的 Spark - 未找到用户/配置单元/仓库

hadoop - Hadoop中的HBASE和HDFS有什么区别?

macos - 运行hdfs namenode -format时出现意外的存储路径

python - 与 Spark 交互的 REST API

python - 如何在 Python 中使用 mrjob 将 Reduce Side Join 作为 Map Reduce 作业进行

hadoop - 从命令行获取配置单元配置

hadoop - MapReduce 从任务中的类路径读取文件

java - 由于 Task attempt failed to report status 600 秒,reduce 失败。杀戮!解决方案?