我们有一个cron作业,每4小时在10 20文件上运行一次,并在20分钟内完成处理。我们正在使用云监视事件将其迁移到NAWS,以触发lambda/fargate。
我正试图找出这三种方法中的最佳选择。
具有并发性的
带有菊花链的
所需的要少。
有什么建议怎么选择吗?如果我也考虑其他选择的话
发布于 2020-10-26 14:41:18
选项3非常适合您的用例。基本上,您将编写一个Docker容器来执行处理,并按照cron计划配置Cloudwatch事件。我也用法尔盖特来达到这个目的,而且效果很好。
选项1听起来不错,但听起来像不必要的额外步骤来拆分文件。
选项2听起来太复杂了。
您也可以查看AWS批处理,但对于此任务来说,这可能是过分的。
https://stackoverflow.com/questions/64537057
复制相似问题