在阅读 ZooKeeper 的文档时,在我看来,HDFS 依赖于与 ZooKeeper 几乎相同的分发/复制机制(广义上讲)。我听到一些回声,但我仍然不能清楚和严格地分辨事物。
我知道 ZooKeeper 是一个集群管理/同步工具,而 HDFS 是一个分布式文件管理系统,但是 HDFS 集群是否需要 ZK?
最佳答案
是的,因素是具有 zookeper 仲裁的 hadoop 集群上的分布式处理和高可用性
例如。 Hadoop Namenode 故障转移过程。
Hadoop 高可用性是围绕 Active Namenode 和 Standby Namenode 设计的,用于故障转移过程。在任何时候,你都不应该同时有两个主人(活跃的Namenodes)。
Zookeper 将集群地址解析为事件名称节点。
关于hadoop - HDFS 和 ZooKeeper 之间的区别?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43173968/