100个上传到亚马逊网络服务Ec2实例的GiB文件

Question

我们有n个文件，总大小约为100 GiB。我们需要上传所有的文件到在亚马逊网络服务(美国地区)托管的EC2 Linux实例。我的办公室(在印度)的互联网连接是4 4Mbps的专用租用线路。上传500MB文件到EC2实例耗时超过45分钟。这太慢了。

如何在最短时间内传输这种批量上传？如果是100 TB，我们可以使用滚雪球导入和导出，但这是100 GiB。

Answer 1

它应该比你体验的快3倍。

如果有许多小文件，您可以尝试“压缩”它们，以发送较少的大文件。

并确保不会通过加密数据(ssh/sftp)来阻碍linux服务器。Ftp可能是你最快的方式。

但是，在最大速度下，100 at总是需要至少57个小时。