使用for for循环广播期间Spark任务序列化错误

Question

我正在尝试在spark中的for循环中广播变量。 在此过程中，spark引发了任务而不是可序列化的错误。 如果从for循环中广播相同的变量，则没有错误。 以下是引发错误的代码段。 任何帮助表示赞赏。

var Final = computedRDD.filter(x => x.Id == uniqueKey(0))

for (partId <- uniqueKey) {
      val FinalBroadcast = sc.broadcast(Final.collect)
      val computeNew = computedRDD.filter(x => x.partId == partId).repartition(executors).mapPartitions(performFinalPass(FinalBroadcast))
      computeNew.collect.forall(x => Final.add(x))
}