我正在寻找能让在集群上轻松运行(正确编码)令人尴尬的并行 JVM 代码的东西(以便我可以使用 Clojure + Incanter)。
我过去曾使用 Parallel Python 来执行此操作。我们有一个新的 PBS 集群,我们的管理员将很快设置使用 PBS 作为后端的 IPython 节点。这两个系统使得在集群中运行某些类型的代码几乎是轻而易举的事。
我过去在使用 Hadoop 时犯了一个错误(Hadoop 不适合我使用的数据类型)- 延迟使得即使是小的运行也需要执行 1-2 分钟。
JPPF 或 Gridgain 哪个更适合我的需要?这里有没有人有任何经验?您还有什么可以推荐的吗?
最佳答案
查看 cascalog - http://github.com/nathanmarz/cascalog
关于java - JVM(尴尬地)并行处理库/工具,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/2509140/