删除-删除-删除s3cmd

Question

我目前正在编写一个脚本，用于将s3桶中的文件与s3cmd同步。

我查了一下文件，上面写着：

s3cmd sync LOCAL_DIR s3://BUCKET[/PREFIX] or s3://BUCKET[/PREFIX] LOCAL_DIR

另外，我还找到了一个不错的选择：

--delete-removed
         Delete remote objects with no corresponding local file [sync]

我测试了s3cmd同步的第一种形式--删除-删除：

s3cmd sync -r --delete-removed LOCAL_DIR s3://BUCKET[/PREFIX]

这就像一个魅力，s3桶将删除我的LOCAL_DIR中没有的任何文件。

然而，当我尝试第二种形式时：

s3cmd sync -r --delete-removed s3://BUCKET[/PREFIX] LOCAL_DIR

s3cmd似乎首先删除LOCAL_DIR下的所有文件，然后将文件从s3桶下载到LOCAL_DIR

这显然是浪费时间，所以还有另一种更好的方式同步，而不删除我的所有本地文件。也就是说，将所有文件从s3桶完全复制到本地dir。

Answer 1

注意路径名称中的尾斜杠(或缺少斜杠)。这很不一样。

http://s3tools.org/s3cmd-sync

重要的是--在这两种情况下，只考虑路径名称的最后一部分。对于没有尾随斜杠的dir1 (在我们的例子中，这与~/demo/dir1 1相同)，路径的最后一部分是dir1，这是在远程端使用的，附加在s3://s3…之后。/path/使s3://s3…/path/dir1 1/…。另一方面，在dir1 1/(请注意尾斜杠)的情况下，它将与~/demo/dir1/ (再次尾随斜杠)相同，实际上类似于将dir1 1/*展开到dir1中的文件列表中。在这种情况下，路径名称的最后一部分(S)是文件名(file1-1.txt和file1-2.txt)，而不是dir1 1/目录名。所以最后的S3路径是s3://s3…/path/file1-1.txt和s3://s3…/path/file1-2.txt，它们中都没有dir1 1/成员。我希望它足够清楚，如果没有在邮件列表中要求或给我一个更好的措辞；)