Spark Scala API：官方示例中spark.createDataFrame中沒有typeTag

Question

我剛剛開始使用MLib for Spark並嘗試運行提供的示例，更具體地說是https://github.com/apache/spark/blob/master/examples/src/main/scala/org/apache/spark/examples /ml/DCTExample.scala

但是，使用IntelliJ IDE進行編譯失敗並顯示以下消息

Error:(41, 35) No TypeTag available for (org.apache.spark.ml.linalg.Vector,)
    val df = spark.createDataFrame(data.map(Tuple1.apply)).toDF("features")

項目設置使用jdk1.8.0_121，spark2.11-2.1.0和scala 2.10.6。

關於該示例為何無法運行的任何想法？ 我在安裝過程中遵循了以下教程： https : //www.supergloo.com/fieldnotes/intellij-scala-spark/

Answer 1

盡管使用Scala 2.10時，Scala 2.11（名稱中的_2.11就是這個意思）沒有火花，盡管這個特定的錯誤看起來很奇怪。 切換至Scala 2.11.8。