集群中同時進行的Java套接字連接的最大數量是多少？

Question

我們在帶寬為每秒1 GB的集群中工作，我們可以使用java套接字在集群中的節點之間執行一些數據傳輸，例如廣播和shuffle（集群中的節點交換數據），多個同時傳輸。 這是一個例子

為了使數據處理最大化，群集中最大的開放套接字連接數是多少？我們如何管理它們？

Answer 1

為了使數據處理最大化，群集中打開套接字的最大數量是多少？

確定插座的最佳數量將取決於許多因素，您可能無法預測其中的許多因素……更不用說量化了。

以及我們如何管理它們？

一種方法是在主服務器和每個工作器之間創建一個套接字，並在套接字上多路傳輸數據。 另一個可能是具有固定大小或可變大小的套接字池。

---

我認為您最好的方法是嘗試不同的方法，並制定一些基准，以使您可以決定哪種管理策略最有效，並對其進行調整。

我也認為您不太可能在StackOverflow上對此類問題獲得明確的答案。 這似乎是一個研究問題 ，而不是簡單的編程/軟件工程問題。 您可能會在數學或計算機科學StackExchange網站上找到答案。 但是，基於數學或CS理論的解決方案將需要問題的精確（即數學！）表述。 比您的圖表更為精確/嚴格的東西。