我想安排一些夜间EMR任务并运行自定义脚本:
其中一些需要在临时实例上运行,另一些需要在运行的服务器上运行,因此只有当cpu /内存阈值低于某个%时才需要运行。
你是怎么做的?如果没有24小时运行的实例来协调所有这些,这个过程是如何扩展的?
另外,如何创建流(这个作业需要在那个作业之后运行,只有在它成功的情况下才需要运行,否则不要运行任何作业),并且您可以自动输出到S3吗?
有没有什么例子?我偶然遇到了http://aws.amazon.com/swf/,但仍然不确定这是否是我要找的……tnx
发布于 2012-10-08 05:52:30
Amazon Simple workflow Service (SWF)是Amazon针对此类工作流的目标解决方案。
https://stackoverflow.com/questions/12767158
复制相似问题