Java中的多節點並發

Question

我編寫了一個多線程Java程序來解決一個令人尷尬的並行問題，以便它利用多核CPU上的所有空閑CPU周期。 我想重構我的解決方案，以便它可以在多個節點上運行，同時仍然保留我已經編寫的大部分代碼。

我過去曾使用過MP的MPI，並且被告知這是解決CPU周期最大化問題的“正確”方法，但我也知道Java中的其他並發框架，如RMI，並想知道它們是否同樣如此好。

有沒有一種很好的方法來處理Java中的多節點和多核並發，其主要目標是盡可能地利用群集中最多的CPU周期？

編輯 ：我得到的印象是沒有簡單的方法來處理這些東西。 我並不感到驚訝，但我希望。 :)

Answer 1

取決於您正在做什么以及您可能想要查看的預算（無特定順序）

• 演員特別是Akka ，它具有良好的遠程演員，STM和帶有Java API的管理員風格管理
• 諾伯特
• GridGain
• 紅陶
• GigaSpaces的
• Oracle Coherence
• IBM Extreme Scale
• TIBCO ActiveSpaces

另見：

• java util concurrent和guava （ 專注於util.concurrent的演示幻燈片 ）（ EventBus ）
• 諸如javolution或JSR 166之類的庫
• 支持函數編程的 JVM語言（如Scala和Clojure）具有比Java更好的多核利用率。
• RXJava （Java，Clojure，Scala ...... Reactive Extentions）

Answer 2

你可以試試Hazelcast 。 它有一個分布式ExecutorService。 這應該允許您將任務添加到跨任意數量的節點運行的服務。

Answer 3

JMS是一個很好的起點。

Answer 4

還要考慮Apache Hadoop ，它使用MapReduce，非常適合許多並行解決方案。