繁体   English   中英

如何将Spark结构化流数据写入Hive?

[英]How to write Spark Structured Streaming Data into Hive?

如何将Spark结构化流数据写入Hive?

df.write().saveAsTable(tablename)但是我不确定它是否写入流数据

我通常做df.writeStream().trigger(new ProcessingTime(1000)).foreach(new KafkaSink()).start()将流数据写入Kafka但是我没有看到类似的东西将流数据写入Hive数据仓库。 有任何想法吗?

df.createOrReplaceTempView("mytable") 
spark.sql("create table mytable as select * from mytable");

要么

df.write().mode(SaveMode.Overwrite).saveAsTable("dbName.tableName");

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM