簡體 English 中英

Apache Kafka 0.9 Java API從主題開始消耗所有消息

[英]Apache Kafka 0.9 Java API Consuming all messages from beginning of topic

原文 2016-05-02 22:54:50 6 1 java/ apache-kafka/ kafka-consumer-api

從一開始，我就必須能夠使用某個主題的所有消息。 基本上與此StackOverflow查詢相同，但已針對Kafka 0.9更新。 （似乎只有很少的0.9特定的StackOverflow答案）。

Kafka高級消費者使用Java API從主題獲取所有消息（相當於--from-beginning）

0.9有一個完全不同的API，我真的不知道從哪里開始。 我可以使用提供的bash腳本從命令行執行此操作，但是不知道如何前進。

您能否為我提供合適的方法或一個小示例腳本，以幫助我入門？ 謝謝！

1 個解決方案

您需要將auto.offset.reset設置為earliest 。 請參閱https://kafka.apache.org/documentation.html#newconsumerconfigs

另請參見https://github.com/apache/kafka/blob/0.9.0/core/src/main/scala/kafka/tools/ConsoleConsumer.scala#L179

使用Java為Apache Kafka 0.9創建主題

[英]Creating a topic for Apache Kafka 0.9 Using Java

通過忽略所有現有消息開始僅使用來自 Kafka 主題的最新消息

[英]Start consuming only latest messages from Kafka Topic by Ignoring all existing messages

以 avro 格式使用來自 apache kafka 的消息

[英]Consuming messages from apache kafka in avro format

從Apache Kafka中的主題中刪除消息

[英]Delete Messages from a Topic in Apache Kafka

Apache Storm - KafkaSpout 不使用來自 Kafka 主題的消息

[英]Apache Storm - KafkaSpout not consuming messaes from Kafka Topic

Kafka Consumer - Java（0.9 API）

[英]Kafka Consumer - Java (0.9 API)

讀取來自 Kafka 主題的所有消息

[英]Reading all messages from a Kafka topic

卡夫卡 - 生產一個主題，然后從該主題消費？

[英]Kafka - producing to a topic then consuming from that topic later?

Java，如何在 apache kafka 中獲取主題中的消息數

[英]Java, How to get number of messages in a topic in apache kafka

如何從一開始就讀取 azure 總線主題中的所有消息

[英]How to read all the messages from a azure bus topic from the beginning

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 使用Java為Apache Kafka 0.9創建主題通過忽略所有現有消息開始僅使用來自 Kafka 主題的最新消息以 avro 格式使用來自 apache kafka 的消息從Apache Kafka中的主題中刪除消息 Apache Storm - KafkaSpout 不使用來自 Kafka 主題的消息 Kafka Consumer - Java（0.9 API）讀取來自 Kafka 主題的所有消息卡夫卡 - 生產一個主題，然后從該主題消費？ Java，如何在 apache kafka 中獲取主題中的消息數如何從一開始就讀取 azure 總線主題中的所有消息

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM