带快照的扩展分布式存储

Question

我知道周围有很多类似的问题，有几个问题有很好的答案。不过，我仍然没有找到我想要的:一个支持快照的分布式、扩展的FS。具有完整快照支持的Gluster将是很棒的，但它们似乎仍然处于概念阶段.

该系统应该能够在多个步骤中从大约20-40 to扩展到100 to以上，并且理想的情况下是具有自由许可和开源的。我有点兴趣的商业解决方案，如果他们是非常负担得起(完整的解决方案与硬件可能是不可能的)。GPFS听起来很有趣。

重要信息：

• 快照！
• 高可用性
• 商品或标准服务器硬件(没有Infiniband或FibreChannel)
• 在POSIX系统上运行

没那么重要：

• 数据局部性感知
• 性能(在吞吐量和延迟方面)
• POSIX遵从性(ACL，权限，.)

我已经考虑过使用Gluster与ZFS的砖块和简单的快照在砖级，但我怀疑这是否会导致可用的快照在Gluster级别。

我的另一个考虑应该是在Ceph块设备上使用ZFS，这样可能会遇到诸如https://github.com/zfsonlinux/spl/issues/241之类的问题，而且性能可能会很差。我还担心ZFS与实际硬件相去甚远。有人有这样的设置经验吗？

Answer 1

您看过CephFS (而不是在Ceph块设备上运行文件系统)吗？我还没有在生产中使用它，但是它声称具有您想要的特性(文件系统的包括快照或任意子树)。

Answer 2

快进到2019年。CephFS现在已经有很长一段时间了，随着珠宝版本10.2.0版本的发布，已宣布生产就绪就出现了。

随着新的BlueStore存储后端(即在Ceph12发光版中引入 )的出现，Ceph设置的复杂度也大大降低。

试试看。

Answer 3

考虑一下QuantaStor。他们是经验与Gluster之上的ZFS (和30%的性能命中)。询问他们关于快照策略的问题。