hadoop - Hadoop HA QJM 和 NFS 的优缺点是什么?

标签 hadoop hdfs hadoop2 high-availability

Hadoop High Availability 需要使用QJM 或NFS 时有什么规定吗?

最佳答案

QJM明显优于NFS

来自 Apache 文档页面:

In order for the Standby node to keep its state synchronized with the Active node, the current implementation requires that the two nodes both have access to a directory on a shared storage device (eg an NFS mount from a NAS). This restriction will likely be relaxed in future.

如果 NFS 安装已关闭或出现一些问题,则无法实现高可用性。

在 QJM 中,编辑被写入多个日志节点,与 NFS 选项相比,失败的可能性较小。

相关的 SE 问题:

Secondary NameNode usage and High availability in Hadoop 2.x

关于hadoop - Hadoop HA QJM 和 NFS 的优缺点是什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38379382/

相关文章:

Hadoop 分布

用于高可用性的 Hadoop 2.0 名称节点、辅助节点和检查点节点

hadoop - ./zkServer.sh status 联系服务时出错。它可能没有运行

oracle - 从Oracle压缩数据到配置单元错误

hadoop - hadoop 版本之间有什么区别?

java - 在 map task 完成之前,Hadoop减少

hadoop - Spark 迭代 HDFS 目录

java - “hadoop dfs -cat output”不返回任何内容

hadoop - 如何修复 "File could only be replicated to 0 nodes instead of minReplication (=1)."?

hadoop - 过滤后的计数值 - Apache PIG