ubuntu - 在Ubuntu上模拟Hadoop集群

标签 ubuntu hadoop cluster-computing distributed-computing

这可能是一个愚蠢的问题。我承认我对hadoop完全陌生,所以请多多包涵。

但,

是否可以在单个ubuntu安装上模拟NameNode和JobTracker的主节点以及DataNode和TaskTracker的多个从节点,而不必拥有多台笔记本电脑/计算机?

无论如何,我可以在单个ubuntu安装上模拟多个节点以进行完全分布式的hadoop操作吗?

再次抱歉是否存在逻辑缺陷&|我的问题中存在事实错误。正如我所说的,我对Hadoop完全陌生。

谢谢...

最佳答案

是的,可以使用虚拟机。

如果您的计算机无法运行,则在使用多个虚拟机时可能会导致系统崩溃。

对于hadoop集群设置,您可以创建三个虚拟机。
因为hadoop的默认最小文件复制值为3。因此文件副本存储在三个不同的VM。

关于ubuntu - 在Ubuntu上模拟Hadoop集群,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/18819946/

相关文章:

android-studio - SO_REUSEPORT 在编译系统上不可用以在 Ubuntu 上运行 android 模拟器

java - 如何让每个 hadoop 映射器获得一个文件对,即一个完整的输入文件 (.csv) 和一个完整的元数据文件 (.json)

hadoop - 如何从 Apache pig 中的日期获取星期几名称?

java - org.apache.hadoop 包不存在

cluster-computing - Aerospike 复制无需持久化

elasticsearch - 如何删除Elasticsearch集群

R 聚类分析和具有相关矩阵的树状图

mysql - JBOSS 和 MySql

linux - Mattermost 的 Apache 反向代理 : No protocol handler was valid for the URL/api/v4/websocket

linux - 无法在 ubuntu 10.10 服务器、EC2 实例中运行 cronjob