动态(向上/向下) kafka集群的监控

Question

我们正在使用kafka集群，我们希望监视这个集群。

目前我们的做法是：

1. 收集jmx指标(telegraf jolokia plugin或jmxtrans)
2. 储入流入
3. 通过grafana渲染

但是，我们面临着卡夫卡经纪人名单的静态配置问题。我们只能通过Jmxtrans或Telegraf jolokia plugin配置静态列表。

我们希望动态列表(例如，只配置kafka集群、动物园管理员连接，以便在每次收集度量的迭代中获得代理列表)用于kafka的情况向上/向下扩展。

是否存在另一种监测动态卡夫卡集群的工具？

Answer 1

接下来我的最后一个解决方案是：

1. 定制bash输入插件(因为我不想用一个定制的go输入插件构建自己的telegraf，而且我现在不太懂go语言：)
2. 在bash插件中，zkCli用于所有kafka节点的发现。
3. 接下来，bash脚本将批量jolokia请求发送到每个kafka节点，聚合并格式化以注入插件。