考虑一个包含N个节点的linux集群。它需要运行M个任务。每个任务都可以在任何节点上运行。假设群集已启动并正常工作。
问:监视M个任务正在运行的最简单方法是什么?如果任务异常退出(退出代码!= 0),请在任何启动的计算机上启动一个新任务。忽略网络分区。
M个任务中有两个具有依赖关系,因此如果任务“m”关闭,则任务“m1”应该停止。然后启动'm‘,当启动时,可以重新启动'm1’。“m1”依赖于“m”。我可以为此提供一个编排脚本。
我最终想要达到Kubernetes,它可以自我修复,但我还没有做到。
发布于 2019-07-29 18:48:35
正确的(tm)方法是设置一个重试,可能使用一些后退策略。在StackOverflow上有很多类似的问题--这就是one of them。
如果您仍然希望执行监视和显式任务重启,则可以基于将为您执行此操作的任务事件来实现服务。这非常简单,也证明了芹菜有多棒。服务应该处理task-failed事件。如何做到这一点的一个例子是在same page上。
发布于 2019-07-30 17:03:39
如果您只需要为每个计算任务运行一个初始化任务,则可以将Job概念与初始化容器一起使用。作业是只运行一次直到完成的任务,如果它崩溃,Kubernetes会重新启动它。初始化容器在实际pod容器启动之前运行,用于初始化任务:https://kubernetes.io/docs/concepts/workloads/pods/init-containers/
https://stackoverflow.com/questions/57235137
复制相似问题