无论如何对kafka流应用程序中的不同输入主题使用不同的auto.offset.reset策略？

Question

用例是：我有一个 kafka 流应用程序，该应用程序从输入主题消费，并输出到中间主题，然后在同一流中另一个拓扑从该中间主题消费。

每当应用程序 id 更新时，两个主题都从最早开始到消费者。 我想将中间主题的 auto.offset.reset 更改为最新，同时将输入主题的 auto.offset.reset 保持为最早。

Answer 1

是的。 您可以通过以下方式为每个主题设置重置策略：

// Processor API
topology.addSource(AutoOffsetReset offsetReset, String name, String... topics); 

// DSL
builder.stream(String topic, Consumed.with(AutoOffsetReset offsetReset));
builder.table(String topic, Consumed.with(AutoOffsetReset offsetReset));

所有这些方法都有一些允许设置它的重载。