首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >文件存储: CouchDB与Server +文件系统

问文件存储: CouchDB与Server +文件系统
EN

Server Fault用户
提问于 2010-11-23 19:15:46
回答 4查看 3.3K关注 0票数 2

我正在探索在我们的高负载网站上存储用户上传的文件(都是MS文档或类似文件)的不同方法。它目前的设计是将文档存储为文件,并让SQL数据库存储这些文件的所有元数据。我担心的是,当文档数量达到数亿时,存储服务器和SQL服务器的性能就会增长。我读到了很多关于CouchDB的好信息,包括它的内置可伸缩性和性能,但我不确定如何将文件作为附件存储在CouchDB中,与在文件系统上存储文件相比性能如何。

有人使用CouchDB集群存储大量文档,并在高负载环境中使用?

EN

回答 4

Server Fault用户

发布于 2010-11-24 12:25:01

回复雷德蒙巴。CouchDB开发团队会对您所看到的崩溃感兴趣。

最重要的是:CouchDB的整个体系结构是基于早期失败原则的。所有子系统以及主服务器的设计方式都是在错误发生时立即终止和恢复。“崩溃”只是正常操作的一部分,它提供了更可靠的软件(具有讽刺意味的是,这就是Erlang的整个哲学)。

至于这个问题,CouchDB能够很好地满足需求。CouchDB的附件流绝对是IO绑定的,非常接近文件系统的速度。CouchDB文档为您提供了元数据和文档附件所需的所有空间,将二进制数据保持在附近。没有必要为此使用不同的系统。

票数 2
EN

Server Fault用户

发布于 2010-11-23 19:51:57

我们在高负载环境中使用CouchDB的经验并不是很好;我们已经看到了很多不稳定(频繁崩溃),邮件列表往往表明,如果出现故障,可以通过安装监视器守护进程重新启动它来解决问题。我们不使用大的值集,但是我们确实经常使用它--但是记住这一点,因为更大的文件意味着更长的连接时间。这意味着,根据带宽和文件大小,在传输过程中下降会更加痛苦。

我建议您使用MongoDB支持GridFS。MongoDB对您(基于您的规范)很好,因为您看起来可能需要将其他元数据存储在文件旁边;因为它面向文档,您将能够将这些元数据存储在二进制文件旁边。为此,GridFS允许在数据库中存储大型文件。

票数 1
EN

Server Fault用户

发布于 2010-11-24 00:54:15

英国广播公司似乎成功地使用了is。我相信TED上有一段视频讨论他们在用它做什么

票数 1
EN
页面原文内容由Server Fault提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://serverfault.com/questions/205310

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档