java - JVM(令人尴尬)并行处理库/工具

我正在寻找一些可以使在集群上运行(正确编码)令人尴尬的并行jvm代码变得容易的东西(这样我就可以使用clojure+incander)。
我以前用过并行python来实现这一点。我们有一个新的pbs集群,我们的管理员将很快建立ipython节点,使用pbs作为后端。这两个系统都使得在集群中运行某些类型的代码几乎不费吹灰之力。
我在过去使用hadoop时犯了一个错误(hadoop不适合我使用的数据类型)——即使是很小的运行,延迟也会执行1-2分钟。
JPPF还是GridGain更适合我的需要?这里有没有人有这方面的经验?你还有什么可以推荐的吗?

最佳答案

据报道,clojure对Terracotta起作用,需要进行一些修补。

本文翻译自 https://stackoverflow.com/questions/2509140/

网站遵循 CC BY-SA 4.0 协议,转载或引用请注明出处。

标签 java clojure parallel-processing jvm embarrassingly-parallel


相关文章:

python - GIL是否会在单独的终端窗口中影响python脚本的并行处理?

java - 枚举反射

java - 如何让log4j在启动时清除日志?

java - 在SQLITE中处理表格(android)

java - 用于调试和测试的Log4j配置

java - 在Clojure中将十六进制摘要转换为long

c# - 如何在AWS SQS队列上添加权限?

python - python并行处理

java - 省略莱宁根的部分来源

c++ - 在openacc中对每个帮派进行递归的私有数组