[英]Spark - Best way agg two values using ReduceByKey
使用Spark，我有一對RDD[(String, (Int, Int)] 。我試圖找到最好的方法來顯示每個鍵的多個和（在這種情況下，分別顯示每個Int的和）。使用reduceByKey做到這reduceByKey 。
這可能嗎？
當然。
val rdd = sc.parallelize(Array(("foo", (1, 10)), ("foo", (2, 2)), ("bar", (5, 5))))
val res = rdd.reduceByKey((p1, p2) => (p1._1 + p2._1, p1._2 + p2._2))
res.collect()
Spark：使用Scala在reduceByKey中的值的平均值而不是sum
[英]Spark : Average of values instead of sum in reduceByKey using Scala
使用.reduceByKey（）的Apache Spark NoSuchMethodError
[英]Apache Spark NoSuchMethodError using .reduceByKey()
用於Apache Spark的reduceByKey（）中的模式匹配Scala（key，Tuple2）值
[英]Pattern matching Scala (key, Tuple2) values in reduceByKey() for Apache Spark
可以用reduceBykey來改變類型和組合值 - Scala Spark？
[英]Can reduceBykey be used to change type and combine values - Scala Spark?
Spark / Scala：僅使用RDD使用ReduceByKey創建嵌套結構
[英]Spark/Scala : Creating Nested Structure using ReduceByKey using RDD only
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.