Kryo 中的 Spark：“java.lang.StackOverflowErrorat com.esotericsoftware.kryo.util.IdentityObjectIntMap.put”

Question

大家。 我遇到了如下所示的錯誤：

我注意到它只是引用了scala中的一個map方法，我想知道如何解決這個問題。 非常感謝~

Answer 1

好的，我會自己解決我的問題。 實際上，stackoverflow 發生的原因是我在代碼中使用了 Mutable.List。 但是，List 具有最大長度值。 當你想要放入List的元素數量超過List設計長度的最大值時，就會出現這個bug。 因此，解決方案是檢查您的代碼並查看您是否使用了某些可能有長度限制的數據結構。