![](/img/trans.png)
[英]Apache Spark: java.lang.NoSuchMethodError .rddToPairRDDFunctions
[英]java.lang.NoSuchMethodError: org.apache.spark.sql.internal.SQLConf.useDeprecatedKafkaOffsetFetching()Z
我想顯示火花數據框,我使用了:
df.writeStream.outputMode("append").start().awaitTermination()
但是當我在運行這一行時遇到錯誤時:
21/07/16 01:20:53 ERROR MicroBatchExecution: Query [id = f243e6e6-c02e-4e70-b5c3-6a821fd33232, runId = 312544cf-fea8-45b4-94a1-c052306538cf] terminated with error
java.lang.NoSuchMethodError: org.apache.spark.sql.internal.SQLConf.useDeprecatedKafkaOffsetFetching()Z
檢查您添加的 spark 版本和依賴項版本。 確保兩者具有相同的版本。 這將解決問題。
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.