高效的 MQTT 代理到 Kafka 代理的橋接

Question

我需要將傳入的傳感器數據從 Mqtt 代理傳輸到 Kafka 代理。 什么是最有效的工具來做到這一點？

有很多經紀人，其中一些提供幾乎相同的功能。

是否有任何代理以有效的方式提供 Kafka 橋接插件？

Answer 1

有一個 MQTT Kafka Connect 連接器。

https://github.com/evokly/kafka-connect-mqtt http://docs.datamountaineer.com/en/latest/mqtt.html

我從未使用過它，但也許值得一試。 讓我知道;)

Answer 2

作為 Kafka Connect 和 MQTT 連接器的替代方案，您也可以為此使用 Confluent MQTT 代理。 如果您擁有 MQTT Broker 的唯一原因，那么這是更容易和更輕量級的設置，因為您不需要這樣的 MQTT Broker。 MQTT 代理的工作方式與 Kafka 的 REST 代理相同。

請參閱此示例，了解如何將 MQTT 與 Apache Kafka 結合使用。 或者直接上 Github 代碼：“ Deep Learning UDF for KSQL for Streaming Anomaly Detection of MQTT IoT Sensor Data ”。