在Scala的Eclipse中org.apache.spark.sql.SQLContext需要哪個jar

Question

我正在使用下面的代碼。

import org.apache.spark.SparkContext
import org.apache.spark.sql.SQLContext

object SqlContextSparkScala {

 def main (args: Array[String]) {
    val sc =SparkContext
    val sqlcontext = new SQLContext(sc)
  }

} 

我收到錯誤消息，例如spark不是org.apache的成員。 我正在eclipse IDE中編寫此Java代碼。請建議適當的jar。

Answer 1

請包含spark-core_2.10-1.4.1.jar

如果您正在使用Maven，請包括以下提到的依賴項

     <dependency>
        <groupId>org.apache.spark</groupId>
        <artifactId>spark-core_2.10</artifactId>
        <version>1.4.1</version>
    </dependency>