apache - HADOOP/YARN - ResourceManager 和 hdfs NameNode 是否总是安装在同一台主机上？

“资源管理器”和“hdfs namenode”是否总是安装在同一台主机上？

1) 当我想向 get new application id 发送 http 请求(YARN REST API)时我正在使用这个网络 uri:

http://<rm http address:port>/ws/v1/cluster/apps/new-application

此端口是Resource-Manager Web UI 的http 端口，默认值为8088，如img1 所示:source for img1 Yarn Ports

2) 当我想为 hdfs 命令发送一个 http 请求(WebHDFS REST API)时，例如 get file status我正在使用这个网络 uri:

http://<HOST>:<PORT>/webhdfs/v1/<PATH>?op=GETFILESTATUS

这<PORT>是 NameNode WebUI http 端口，它的默认值为 50070，如 img2 所示:source for img2 HDFS Ports

那些组件(ResourceManager 和 NaneNode)的主机是否总是安装在同一台主机上？

任何帮助将不胜感激，谢谢!

最佳答案

没有必要在单台机器上运行resourceManager和nameNode，我们在单节点/小型集群中工作时有这样的配置---有几个节点---配置。当有大型集群时，master节点通常在不同的机器上运行resourceManager、nameNode和secondaryNamenode。

cluster topology

查看这些链接:

关于apache - HADOOP/YARN - ResourceManager 和 hdfs NameNode 是否总是安装在同一台主机上？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/29346081/