Kafka复制可以部署在其他计算机上吗？

Question

我正在运行一个项目。 我的目标是设计一个Kafka集群。 防止一台机器死机时该卡夫卡上的数据全部消失的情况。 我想知道是否可以在其他计算机上设置Kafka复制以进行备份？

Answer 1

除了在主题上将复制因子设置为2或3以确保最终创建备份副本之外，还应发布acks = all消息，以确保确认表示已将数据写入所有副本。 否则，在acks = 1的情况下，仅提交1个副本后，您将得到一个ack；在acks = 0的情况下，您将根本没有ack，因此您将永远不会知道您发布的消息是否已放入Kafka提交日志中。

还将不干净的领导者选举参数设置为false，以确保只有异步副本才能成为领导者。

Answer 2

在Kafka中，您可以定义主题的复制因子，并以此方式将每个分区复制到更多代理上。 其中一位是领导者，生产者和消费者之间可以进行交流以交换消息。 另一个将是关注者，这些关注者将从领导者获取消息的副本以进行同步。 如果领导者失败，则所有同步副本之间将开始新的领导者选举。 Kafka将支持N-1个失败的代理，其中N是复制因子。

Answer 3

是的，复制因子定义了这一点。