无状态节点是否意味着彼此独立?你能用 hadoop 解释一下这个概念吗
最佳答案
解释如下:每个映射器/缩减器都不知道所有其他映射器/缩减器(即关于它们的当前状态、它们的特定输出(如果有的话)等)。这种无状态对于某些数据处理工作负载(例如图形数据)来说不是很好,但可以轻松并行化(特定的 map/reduce 任务可以在任何节点上运行,这意味着失败的 mapper/reducer 不是问题,只需在相同的输入拆分/映射器的输出)。
关于hadoop - 什么是无状态节点? Hadoop 节点如何是无状态的?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42066113/