亚马逊S3存储桶与谷歌云存储存储桶之间的实时同步

Question

我有亚马逊网络服务的s3存储桶，在亚马逊网络服务的firehose中执行一些操作后，我每分钟都会收到多个拼图文件。现在我必须用GCP云存储桶实时同步这些文件，因为我们有多个云环境，进一步的过程将在GCP云中进行。但我有一个问题，我如何在两个云存储桶之间进行实时同步，以便任何文件一到达亚马逊网络服务s3，同时它也应该到达GCP bucket。请输入任何内容

Answer 1

如果你的字面意思是更新发生在S3和GCS原子上，那是不可能的。你能做的最好的事情就是有一个任务，在一个任务完成更新时收到通知，然后开始复制到另一个任务。您需要投入一些工作来使工作对于暂时性故障具有健壮性。