kafka 流如何尝试为每个 kafka 主题获取相同的分区？

Question

如果我有多个应用程序实例，并且我正在加入两个主题，那么每个实例都必须获得相同的分区才能加入数据。 同时，它必须在实例之间平均分配分区。

如果我猜的话，我认为它会为第一个主题随机请求一个分区，将其保存在上下文中，然后为连接中涉及的所有其他主题请求相同的分区？

任何人都可以确认吗？

Answer 1

涉及到stream join时，最好将底层topic进行co-partitioned 。 这样你就不必担心任何奇怪的行为。

这意味着，由于 Kafka 默认按键对数据进行分区，因此您可以使用连接条件中使用的键作为 kafka 主题中消息的键。 这样，与消费者端的范围分配策略（ partition.assignment.strategy ）一起，您将获得最佳连接。

一个必需的条件是在两个主题中具有相同数量的分区。

在这里阅读更多。