哪個生產者收集Web服務器日志並將其轉換為Avro格式並寫入kafka？

Question

當前，我想收集Apache Web服務器日志（access_logs，error_logs文件）並以Avro格式寫入Kafka。 是否有現有的生產者可以執行此操作？ 如果不能，請提供一種實現方法嗎？ 我在Google上搜索，但沒有運氣。

像http://grokbase.com/t/kafka/users/14851mg6mk/apache-webserver-access-logs-kafka-producer一樣，但我想以Avro格式編寫。

提前致謝。

Answer 1

您可以將Logstash Kafka輸出與Avro編解碼器一起使用 -這應該可以完成我理解的操作。