首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >动物园管理员应该在工人机器或独立机器上运行吗?

问动物园管理员应该在工人机器或独立机器上运行吗?
EN

Stack Overflow用户
提问于 2016-11-23 02:41:54
回答 3查看 934关注 0票数 0

我们有几种使用动物园管理员的软件,如Solr、Storm、Kafka、Hbase等。

安装动物园管理员集群有两个选项(超过一个节点):

  1. Embedded集群:在与其他软件安装的机器上安装ZK
  2. 外部集群:有几台功能不太强大但专用的动物园管理员机器(尽管在同一区域,云和数据中心)来运行动物园管理员。

哪一个是更好的集群稳定的选择?请注意,在这两种情况下,我们在动物园管理员集群中总是有奇数的机器,而不仅仅是一台机器。

嵌入式选项似乎更容易设置,并且更好地使用了机器,但外部选项似乎更稳定,因为单个机器的丢失意味着只丢失一个组件(嵌入式动物园管理员中的机器丢失意味着丢失动物园管理员节点以及Solr、Storm、Kafka的工作节点,不管在什么情况下)。

在生产中运行动物园管理员的行业标准是什么,以达到最大的稳定性?

EN

回答 3

Stack Overflow用户

发布于 2016-11-23 07:54:12

动物园管理员是Kafka集群的关键组件,但是自从新一代客户端实现以来,ZK上的负载已经大大减少,现在只能由集群自己使用。尽管负载通常不是很高,但它可能对延迟很敏感,因此最好的做法是在专用机器上运行Zookeeper集成,甚至为ZK事务日志最佳地使用专用磁盘以避免IO争用。

通过使用更大的动物园管理员集群,您可以获得弹性,但这也会增加集群内部的通信,您可能会失去一些性能。因为“动物园管理员”以简单多数投票的方式工作,因此您需要一些奇数的节点才能使其有意义。3节点集成允许丢失1个节点而不受影响,5个节点集成允许丢失2个节点等等。

在实践中,我已经看到,与Kafka节点一样安装在同一台机器上的小型、低工作负载集群运行得非常好,但是如果您的目标是最大限度地保持稳定并增加流量,那么建议使用单独的集群。

票数 1
EN

Stack Overflow用户

发布于 2016-11-23 06:53:24

您应该认为自己不愿意在生产中使用内部ZooKeeper。

有外部动物园管理员是很好的,如果你有一个动物园管理员节点,最好的如果动物园管理员集合(两个或更多),当它下降时可能会产生问题。

如果您拥有动物园管理员节点的集群设置,并且如果一个动物园管理员节点下降,则其余的多数节点将继续运行。

更多细节

票数 0
EN

Stack Overflow用户

发布于 2016-11-23 16:15:53

对于SolrCloud,我们强烈建议动物园管理员是外部的,并且至少有三个。

这并不意味着它不能在与Solr相同的服务器上运行,但它确实意味着您不应该使用Solr本身可以启动的、嵌入到其内部的动物园管理员服务器。

下面是一些与性能和SolrCloud有关的信息,这些信息涉及到动物园管理员:

https://wiki.apache.org/solr/SolrPerformanceProblems#SolrCloud

在与Solr相同的机器上运行时,您是否需要完全独立的机器,甚至是否需要为zookeeper数据库提供单独的磁盘,这很大程度上取决于SolrCloud安装的特性。如果您的索引非常小,而且查询负载很低,则可以将动物园管理员放在相同的机器上,甚至是相同的磁盘上。

对于您提到的其他服务,我不知道推荐是什么。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/40755137

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档