簡體   English   中英

使用 Spark Structured Streaming 從 Kafka 主題讀取:可以由 Spark 解析發布到 Kafka 主題的多行 JSON 嗎?

[英]Reading from Kafka topic using Spark Structured Streaming: Can multi-line JSON published to Kafka topic be parsed by Spark?

是否可以使用結構化流通過 spark 解析/讀取多行 JSON 發布到 Kafka 主題?

如果您使用大於 2.2 的 spark 版本,以下將起作用。

 spark.read
  .option("multiLine", true).option("mode", "PERMISSIVE")
  .json("/path/to/user.json")

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM