我需要下载100 GB的文件(它在大约150个文件)在7天内到期。下载速度受到主机的限制,因此比基于正常互联网速度的理论传输速度要长得多。我有一个curl http://curl.haxx.se/docs/manpage.html命令脚本--每个文件一行。
我的想法是自动旋转n个EC2实例,执行命令并将文件放到一个中心位置,然后关闭机器。我该怎么做?
我不在乎它是Linux还是Windows。
发布于 2011-02-01 21:54:53
我建议您使用佳能的一个AMIs与云init结合使用
https://help.ubuntu.com/community/CloudInit
查找有关“用户数据脚本”的部分,您可以使用--用户数据文件在启动时自动启动脚本。因此,您只需将要运行的所有命令放在脚本中,并将“立即关闭-h”放在脚本的末尾。
发布于 2011-01-31 20:46:28
我以前使用过博托来编写这样的东西。最容易将linux映像旋转,然后将ssh放入其中,让它们工作。
发布于 2011-02-01 05:11:50
不确定最好的解决方案。但是,如果您定期这样做,并且需要一些东西来自动启动和停止您的机器,那么您可能想看看这个产品:http://LabSlice.com (声明我是CTO)。
https://serverfault.com/questions/229298
复制相似问题