我想建立一个多kafka集群，大约有3个zookeeper示例，每个集群中有3个kafka代理，每个kafka代理大约有5个主题和5个分区。有什么安装指南我可以参考吗？ps：我可以找到一个带有多个kafka代理的zookeeper示例的信息，但不能找到带有多个zookeeper示例的设置。
bfnvny8b1#
您应该可以找到初学者指南，但是我们发现apachekafka文档包含了您可能遇到的问题的所有答案。总的来说，我们经历了Kafka无痛的建立过程。zookeeper示例的数量应为奇数且>=3。对于1个zookeeper示例，只有一个失败点。顺便说一下，每个主题5个分区似乎很低。您可以随时增加分区的数量。更高数量的分区允许使用更多的使用者，但也要求使用者进程使用更多的内存，因为使用者在每个拥有的分区中缓冲一定数量的kafka消息。作为参考，我们使用类似的设置，每个主题使用60个分区。
1条答案
按热度按时间bfnvny8b1#
您应该可以找到初学者指南，但是我们发现apachekafka文档包含了您可能遇到的问题的所有答案。总的来说，我们经历了Kafka无痛的建立过程。
zookeeper示例的数量应为奇数且>=3。对于1个zookeeper示例，只有一个失败点。
顺便说一下，每个主题5个分区似乎很低。您可以随时增加分区的数量。更高数量的分区允许使用更多的使用者，但也要求使用者进程使用更多的内存，因为使用者在每个拥有的分区中缓冲一定数量的kafka消息。作为参考，我们使用类似的设置，每个主题使用60个分区。