Linux到Linux，10 TB传输？

Question

我看过以前所有类似的问题，但答案似乎到处都是，没有人在移动大量数据(100 GB与10 TB不同)。

我有大约10个TB，我需要从一个RAID数组转移到另一个RAID数组，千兆以太网，免费百科全书，XFS文件系统。我最关心的是转会中途死亡，不能轻易恢复。速度会很好，但是确保转会更重要。

正常情况下，我只想使用tar & netcat，但我移动的RAID阵列最近已经非常脆弱了，如果它在进程中掉落，我需要能够恢复和恢复。我应该看看rsync吗？

再看一看，我认为rsync可能太慢了，我想避免花费30天或更长的时间。因此，现在我正在寻找关于如何使用网猫监视/恢复传输的建议。

Answer 1

是的，rsync

除了奇球之外，异步功能最近也出现了。

Answer 2

如果你能将千万不要低估装满磁带的旅行车的带宽。 10 2TB分成(比如说2TB)块，那么相对便宜的消费级NAS设备是可行的。如果这是一次性的，那么半手工的过程可能是可行的，而2TB的NAS仅仅是几百美元。

如果您需要一个正在进行的过程，那么您可以在完成初始传输之后设置RSYNC。

Answer 3

几个月前我不得不做这样的工作。我使用并行rsync来加速这个过程。它将要传输/同步的文件拆分为块，并且可以在任何时候恢复。有关并行rsync脚本，请参阅下面的链接。

https://gist.github.com/rcoup/5358786