hadoop - Hadoop Map Reduce 和 Google Map Reduce 之间的区别

标签 hadoop mapreduce

Hadoop Map Reduce 和 Google Map Reduce 有什么区别?

难道只是 Hadoop 为 map reduce 等提供了标准化?差异中还有什么。

最佳答案

Google MapReduce 和 Hadoop 是 MapReduce 框架/概念的两种不同实现(实例)。 Hadoop 是开源的,Google MapReduce 不是,实际上没有太多关于它的可用细节。

由于他们处理大型数据集,因此他们必须依赖分布式文件系统。 Hadoop 使用 HDFS(Hadoop 分布式文件系统)作为标准分布式文件系统,而 Google MapReduce 使用 GFS(谷歌文件系统)

Hadoop 是用 java 实现的。 Google MapReduce 似乎是用 C++ 编写的。

关于hadoop - Hadoop Map Reduce 和 Google Map Reduce 之间的区别,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/11377260/

相关文章:

hadoop - 如果在 Hadoop Map Reduce 中定义了自定义分区程序,默认哈希分区程序是否仍然有效?

用于计算参数值的 MapReduce

hadoop - Hadoop:mapreduce可以更新输入吗?

java - hadoop mapreduce 和 s3 的多个输入文件夹

hadoop - 如何在Hive中将一天的数据填充到整周

Hadoop YARN如何确定容器数量

hadoop - 使MapReduce程序读取数据有哪些不同的方式?

Hadoop 推测任务执行

hadoop - Gobblin Map-reduce作业在EMR上成功运行,但在s3中无输出

java.lang.IllegalArgumentException : Wrong FS: hdfs://localhost:9000 expected: file:///异常