apache-spark - 如何在单机上创建集群式hadoop环境？

Closed. This question needs to be more focused。它当前不接受答案。

想改善这个问题吗？更新问题，使其仅关注editing this post的一个问题。

去年关闭。

Improve this question

我正在尝试通过Hadoop配置集群大数据环境。我在Windows 10操作系统中有一台配备i5处理器和16GB Ram的计算机，或者有没有什么方法可以配置为具有相同配置的学习开发环境。

最佳答案

如果要在计算机中有一个单节点群集。然后docker是@sumitkumar推荐的选项，但是我认为您可能是初学者，因此这种方法可能不太适合您。

我建议您安装任何软件:VMWare/VirtualBox并下载CentOS7镜像文件并将其加载到虚拟机，然后在其上安装单节点群集。我为您提供了Apache Hadoop开源单节点群集安装的官方链接，并且如果您不愿意付出太多努力+您还想要Hadoop群集的UI，那么建议您安装Setup Ambari。

(最新)Ambari-2.7.0
(稳定)Ambari-2.6.2

Hadoop Open Source

关于apache-spark - 如何在单机上创建集群式hadoop环境？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/51882141/

上一篇：hadoop - 哪个搜索引擎适合大数据

下一篇：hadoop - Hue内部架构和配置单元查询执行

相关文章：

sql - Hive无法识别路径中的下划线

hadoop - Hadoop 2.x 中的 Nutch

hadoop - 哪个类将 Hive & Ping 解析为 Map Reduce

apache-spark - 查找事件的 Hadoop 镜像

java - Spark根据列值设置连续计数器值

apache-spark - Spark UDAF : java. lang.InternalError:类名格式错误

apache-spark - 将向量转换为数据帧时出错

hadoop - hadoop grep 示例中每行一张 map 是否合理？

hadoop - 伪分布式配置hbase

r - 如何在 Sparklyr 管道中添加自定义函数