有人有用s3fs使用Openstack对象存储并同时使用多个写入挂载访问同一个文件(S)的经验吗?
例如,s3的手册页:https://linux.die.net/man/1/s3fs有以下段落:
“虽然多用户功能可以在多个用户之间共享s3存储桶,但目前亚马逊S3服务的数据一致性模型阻止了来自多个用户的多个挂载的安全使用。虽然s3fs目前将允许多个挂载,但这种活动可能会导致数据损坏。未来的发行版将包含一种锁定机制,以安全地防范多个读-写挂载。单读-写入挂载后的多个只读挂载是安全的,但不会反映对任何文件或文件系统元数据的可写装入所做的更改,从而限制了它的有用性。”
上面提到的锁定机制实现了吗?
谢谢马克
发布于 2020-12-15 13:26:35
这个手册页面引用了另一个基于Python的s3fs,它在2016年左右从互联网上掉了下来,并在2009年停止了开发:
https://web.archive.org/web/20161008081920/https://fedorahosted.org/s3fs/
我建议使用更流行的S3fs-保险丝代替。我给die.net网站管理员发了电子邮件,试图更新这一点,因为人们通常会参考s3fs-fuse。
具体来说,在多个编写器存在时,s3fs不具有POSIX语义,这可能表现为数据损坏。底层的S3对象存储遵循最后一个写入器-wins模型,其中每个PutObject或CompleteMultipartUpload RPC原子地替换对象。s3fs还有一个缓存模型,它可以向应用程序提供陈旧的数据。
yas3fs类似于s3fs-fuse,并通过Amazon /SQS实现锁定。然而,这将使您进一步远离OpenStack生态系统。
https://serverfault.com/questions/1046241
复制相似问题