可以在没有zookeeper的情况下使用dolphinscheduler吗？

Question

Zookeeper在开源工作流框架dolphinscheduler中扮演着多种角色，如主机和工人之间的心跳检测、任务队列、事件侦听器和分布式锁。dolphin-sche framework

有没有可能用数据库(mysql)来代替它？主要原因是为了简化项目结构。

Answer 1

DS中的zookeeper主要用于：

1. 任务队列，用于主程序将任务发送到worker
2. 锁，用于主机(主程序和工作程序)之间的通信
3. 事件监视器。Master监听worker添加或删除

的事件

将zk替换为mysql的成本。

Answer 2

zk主要承担注册表的职责，监控应用程序的状态。zk在这一领域非常成熟，是业界公认的解决方案。如果MySQL想这样做，技术实现成本会更大，可能达不到预期的效果。

顺便说一句，他们的团队目前正在为注册表开发SPI，在以后的版本中，也许您可以使用其他组件，如etcd，来实现类似的功能。

Answer 3

目前，系统中的MasterServer和WorkerServer节点都使用Zookeeper进行集群管理和容错。此外，系统还基于ZooKeeper进行事件监控和分布式锁定。我们也实现了基于Redis的队列，但我们希望DolphinScheduler对组件的依赖尽可能少，所以我们最终删除了Redis实现。

所以现在没有Zookeeper，DolphinScheduler就不能很好地工作，也许在未来。

DolphinScheduler系统架构：

​

​

更多文档请参考：Official Document。