在scala spark中迭代數組或任何其他集合中的RDD和存儲值

Question

我是 Scala 的新手。 我正在迭代 RDD 並將每個值存儲在數組或任何其他集合中。 但是值不存儲在 Array 中。

val ItrRdd = sqlContext.sql("select district,state FROM world ").rdd
var ItrRdd_data = ItrRdd.map { x =>
       (x.getString(0), x.getString(1))
    }

var district = Array[String]()

ItrRdd_data.map{ x => 
      district.+:(x._1)
    }   

然后如果我打印分區，那么它將是空白的。 有人可以幫我做這個或其他類似上面的。

提前致謝。

Answer 1

使用下面的來計算district

val district = ItrRdd_data.map({ case(x,y) => x -> y }).collect()