繁体 English 中英

Apache Kafka 0.9 Java API从主题开始消耗所有消息

[英]Apache Kafka 0.9 Java API Consuming all messages from beginning of topic

原文 2016-05-02 22:54:50 0 1 java/ apache-kafka/ kafka-consumer-api

从一开始，我就必须能够使用某个主题的所有消息。 基本上与此StackOverflow查询相同，但已针对Kafka 0.9更新。 （似乎只有很少的0.9特定的StackOverflow答案）。

Kafka高级消费者使用Java API从主题获取所有消息（相当于--from-beginning）

0.9有一个完全不同的API，我真的不知道从哪里开始。 我可以使用提供的bash脚本从命令行执行此操作，但是不知道如何前进。

您能否为我提供合适的方法或一个小示例脚本，以帮助我入门？ 谢谢！

1 个解决方案

您需要将auto.offset.reset设置为earliest 。 请参阅https://kafka.apache.org/documentation.html#newconsumerconfigs

另请参见https://github.com/apache/kafka/blob/0.9.0/core/src/main/scala/kafka/tools/ConsoleConsumer.scala#L179

使用Java为Apache Kafka 0.9创建主题

[英]Creating a topic for Apache Kafka 0.9 Using Java

通过忽略所有现有消息开始仅使用来自 Kafka 主题的最新消息

[英]Start consuming only latest messages from Kafka Topic by Ignoring all existing messages

以 avro 格式使用来自 apache kafka 的消息

[英]Consuming messages from apache kafka in avro format

从Apache Kafka中的主题中删除消息

[英]Delete Messages from a Topic in Apache Kafka

Apache Storm - KafkaSpout 不使用来自 Kafka 主题的消息

[英]Apache Storm - KafkaSpout not consuming messaes from Kafka Topic

Kafka Consumer - Java（0.9 API）

[英]Kafka Consumer - Java (0.9 API)

读取来自 Kafka 主题的所有消息

[英]Reading all messages from a Kafka topic

卡夫卡 - 生产一个主题，然后从该主题消费？

[英]Kafka - producing to a topic then consuming from that topic later?

Java，如何在 apache kafka 中获取主题中的消息数

[英]Java, How to get number of messages in a topic in apache kafka

如何从一开始就读取 azure 总线主题中的所有消息

[英]How to read all the messages from a azure bus topic from the beginning

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 使用Java为Apache Kafka 0.9创建主题通过忽略所有现有消息开始仅使用来自 Kafka 主题的最新消息以 avro 格式使用来自 apache kafka 的消息从Apache Kafka中的主题中删除消息 Apache Storm - KafkaSpout 不使用来自 Kafka 主题的消息 Kafka Consumer - Java（0.9 API）读取来自 Kafka 主题的所有消息卡夫卡 - 生产一个主题，然后从该主题消费？ Java，如何在 apache kafka 中获取主题中的消息数如何从一开始就读取 azure 总线主题中的所有消息

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM