[英]Decrease topic replication factor after Kafka brokers removed from cluster and failed reassignments
[英]Optimal number of partition for kafka topic on 5 brokers with replication factor=3 in 1 cluster
什么是最优的没有。 具有5个代理和复制因子= 3的主题的分区? 此群集中只有6个主题。
每个代理运行的计算机配置如下。
Memory=16gb
Porcessor= Octacore, Intel(R) Xeon(R) CPU E5-2650 v3 @ 2.30GHz
除了每个主题1000个分区的打开文件以外的任何挑战?
从Kafka 1.1.0开始,建议每个代理最多有4'000个分区,每个群集最多有200'000个分区。 在这里阅读更多。
请注意 ,即使您可以创建大量分区,也不意味着您的硬件将能够支持它。 确保根据负载调整群集硬件(CPU,RAM,HDD等)。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.