ZFS离线冗余软件

Question

我有一个300 to的Freenas服务器来备份几个linux节点。备份适用于每日快照和rsync任务。

用户经常在服务器之间移动大数据集(2-5TB) --所以大文件常常在多个服务器上备份几次。

在线去重复太贵了(1,5TB内存.)，那么有没有任何离线去复制软件呢？

我的意思是，这些文件确实有相同的名字和相同的访问时间-- fdupes只需很小的努力就能认出它们是相同的.

Answer 1

尝试BorgBackup --但是您必须使用它而不是rsync。

这里：https://www.borgbackup.org/

Answer 2

在本例中，您可以很容易地使用zpaq或zpaqfranz。

http://mattmahoney.net/dc/zpaq.html或https://github.com/fcorbelli/zpaqfranz

后者(我的叉子)具有在单个存档中“冻结”或“合并”zfs快照的特定功能。