spark graphx-在Scala中創建圖形對象列表

Question

我想使圖中的邊成為子圖。 然后，我想根據一個准則合並這些子圖並形成集團。 基本上我想知道如何創建Graph對象的列表。

如何使用Scala中的Apache Spark的Graph X API實現此目的？

import org.apache.spark._
import org.apache.spark.graphx._
import org.apache.spark.rdd.RDD
import scala.collection.mutable.ArrayBuffer

val cliques = ArrayBuffer[Graph[(String, Int),Int]]()

var edges = sc.textFile("edges.g3").map { 
  line => var fields = line.split("\\s+")

  println(line)

  val vertexArray = Array(
  (fields(0).toLong, (fields(0), 1)),
  (fields(1).toLong, (fields(1), 1)))

  val edgeArray = Array(
  Edge(fields(0).toLong,fields(1).toLong,0)
  )

  val vertexRDD: RDD[(Long, (String, Int))] = sc.parallelize(vertexArray)
  val edgeRDD: RDD[Edge[Int]] = sc.parallelize(edgeArray)

  val graph: Graph[(String, Int),Int] = new Graph(vertexRDD, edgeRDD)

  cliques += graph

}

這段代碼給出了Graph類是抽象類，因此無法實例化的錯誤。 有什么方法可以創建圖列表？

如何實例化Graph對象是​​我的主要問題？

Answer 1

代替new Graph(vertexRDD, edgeRDD)您需要使用Graph(vertexRDD, edgeRDD) 。 查看文檔中的一些示例。