如何将Option [RDD]转换为RDD [重复]

Question

这个问题已经在这里有了答案：

我使用以下一些密钥将RDD存储到可变的Hashmap中。

var datasets = new HashMap[String, RDD[T]]()
val feedRdd: RDD[T] = ...
datasets.put("someKey", feedRdd)

现在，我试图从Hashmap获取相同的rdd，并返回Option [RDD [T]]，如下所示

val feedRddNew = datasets.get("someKey")

这给了类似这样的错误。

Option [RDD [T]]类型的表达式未确认为预期的RDD [T]类型

基本上，我想将rdd存储到Hashmap中，以便可以根据需要从Hashmap中获取它。 有什么想法吗？ 如果有问题或其他替代方法，请告诉我。 谢谢！

Answer 1

val feedRddNew = datasets.get("someKey")

此getter返回一个Option [T]，其中T是存储在映射中的类型。

因此，要么是None，要么是Some（T）

所以你可以做

val theActualValue = feedRddNew.get

或者，您可以只使用

datasets("someKey")

不会返回选项（如果找不到密钥，则只会抛出该选项）