如何在 Pyflink 中连接 Flink 和 Elasticsearch？

Question

我的目标是创建一个与Kafka > Flink > ElasticSearch > Kibana相关的实时处理项目。

我可以在 Flink 中使用来自 Kafka 的消息，但无法连接 Flink 和 ElasticSearch。 如何将 Flink 消耗的 kafka 消息发送到 ElasticSearch？

我的 python 3.8 环境包括：apache-flink=1.15.0

Answer 1

您可以使用Table API创建Elasticsearch Sink表：

https://nightlies.apache.org/flink/flink-docs-stable/docs/dev/python/table/python_table_api_connectors/#how-to-use-connectors

https://nightlies.apache.org/flink/flink-docs-stable/docs/connectors/table/elasticsearch/#how-to-create-an-elasticsearch-table

如果您需要将 DataStream 转换为表 API，您可以在此处找到一些帮助： https://nightlies.ZB6EFD606D118D0F62066E31419FF04CC_apiZ//docs/table/data_docs_stream