紗線和集群模式下打印spark命令

Question

我需要在火花紗線模式下打印一些命令。 顯然 println(message) 不起作用......我想找到一種方法來收集消息。 有人可以指出我當前的方法，例如使用 collect 嗎？

如何使用收集？

下面的代碼有效嗎？

val c=message.collect()
println (c)

Answer 1

您可以使用以下命令實現此目的：

message.foreach(println)

您將在執行程序日志中找到上述調用的輸出。