我想在亚马逊EC2上安装两个节点卡夫卡集群。
我遵循这个链接中的步骤:https://www.digitalocean.com/community/tutorials/how-to-install-apache-kafka-on-ubuntu-14-04
另外,我希望在两个节点上都有动物园管理员,因为如果我只在一个节点上使用,如果那个节点死了,那么我的kafka集群就会死。
在步骤9(安装多节点集群)中,他们说我需要在kafka服务器属性中修改zookeeper.connect,这样它就有安装动物园管理员的每个节点的逗号分隔的ip:端口列表。
另一方面,当我想要创建一个主题时,在脚本中我只指定了一个动物园管理员!
1)另一个动物园管理员节点会知道主题已经创建了吗?
( 2)如果一个动物园管理员节点失败,另一个节点会接管吗?
3)‘当失败的节点再次上升时,是否会再次从活着的节点获取有关主题的信息?
致以敬意,
斯尔詹
发布于 2016-06-17 20:05:53
您应该创建一个不少于三个节点的集群。正如Serejja所提到的,对于容错来说,它应该是奇数。
3、5、7、9等
对于Kafka,在创建主题时应该指定一个-复制因子。在三个节点集群中,这是建议将其设置为两个或三个。
在这种情况下,如果其中一个代理崩溃,数据将被复制到可用的节点上,然后一旦不可用节点恢复联机,数据就会传播到它。
卡夫卡文档太棒了,我建议进一步阅读复制主题。
https://stackoverflow.com/questions/37861050
复制相似问题