google-app-engine - GAE MapReduce 并行性和配额

标签 google-app-engine mapreduce

每分钟配额适用于 Google App Engine MapReduce 的方式是否与适用于任何仅使用任务队列进行并行性的非 MapReduce 程序相同,或者 MapReduce 是一种特殊类型的并行性实现吗? Link to per minute quotas

最佳答案

MapReduce 并不是并行性的一种特殊实现;这是一个奇特且有用的框架,使用不同的 Google App Engine API(例如 Datastore、Taskqueue 和 Memcache)实现 MapReduce GAE 风格的计算。

当您运行 MapReduce 作业时,您具有与任何其他非 MapReduce 任务相同的约束/配额; quota管理器框架模块帮助映射器限制执行速度,避免超出配额。

关于google-app-engine - GAE MapReduce 并行性和配额,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/5462184/

相关文章:

google-app-engine - 更改 GAE 应用程序位置

hadoop - 如何为reducer中的每个键输出单独的输出文件?

java - 如何在java中为谷歌应用程序实现单点登录

scala - 如何使用 Spark-Scala 本地程序从谷歌云存储中读取简单的文本文件

python - 使用ReferenceProperty时如何查询数据存储?

hadoop - Oozie MR 启动器有什么意义?

hadoop - 可以处理这些场景的好的hadoop文件夹结构是什么?

java - 运行hadoop流和mapreduce作业:PipeMapRed.waitOutputThreads():子进程失败,代码为127

hadoop - 如何在 Pig 中跟踪文件组合过程

google-app-engine - 如何构建电影数据库和用户选择?