Kafka Consumer抵消获取
[英]Kafka Consumer offset fetch
问题描述
我正在使用偏移存储为kafka的kafka版本ie_consumer_offsets
当消费者不活跃或不活跃时，如何获取消费者补偿？
2 个解决方案
解决方案1
0 2018-01-23 11:43:27
下面的命令工作，但有缺陷，它从一开始就读取不是最新的
kafka-console-consumer --consumer.config /tmp/consumer.config --formatter“ kafka.coordinator.GroupMetadataManager \\ $ OffsetsMessageFormatter” --zookeeper <> --topic __consumer_offsets --from-beginning
解决方案2
0 2018-01-24 07:06:59
如果您的消费者不满意，并且您希望为特定组的主题提供上次提交的偏移量，请参考下面提到的资源
如果Kafka Consumer失败（Spark Job），如何获取Kafka Consumer提交的最后一个偏移量。 （斯卡拉）
[英]If Kafka Consumer fails (Spark Job), how to fetch the last offset committed by Kafka Consumer. (Scala)
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.