pyspark中的结构化流

Question

我试图将数据从另一台服务器流式传输到HBase，并能够在Python中定义不同的列系列。 我在Spark文档中环顾四周，仅看到：

writestream.format('jdbc').start('jdbc:///')

如何将直接映射到HBase并具有将数据映射到不同列族的功能？

Answer 1

您可以使用foreach （Scala或Java）将数据写入HBase： http : //spark.apache.org/docs/latest/structured-streaming-programming-guide.html#using-foreach