Spark leftOuterJoin问题-leftOuterJoin不是org.apache.spark.rdd.RDD [（String，String）]的成员

Question

我正在尝试为leftOuterJoin写一个简单的包装。 我是这样开始的，遇到奇怪的问题，

import org.apache.spark.rdd.RDD
import org.apache.spark.SparkContext._
import org.apache.spark.rdd.PairRDDFunctions
import scala.reflect.ClassTag

case class Joins(self: RDD[(String,String)]) {
        def loj(other: RDD[(String,String)]) = {
        (self.leftOuterJoin(other))
      }
    }

错误：值leftOuterJoin不是org.apache.spark.rdd.RDD [（String，String）]的成员

我在哪里错了？

Answer 1

我认为这只是一个突出显示的错误，所以您可以添加

import org.apache.spark.rdd.RDD._

似乎Spark 1.4.x的 SparkContext._行为已更改， SparkContext._不再是强制性的，但IDE仍需要它来识别正确的类型。