高性能大文本存储解决方案

Question

下面是一个场景：

1)当前所有数据都存储在Server中

2)有一个表X存储最重要和访问最频繁的数据

3)表X中的每条记录都有一列Y，存储最多2GB的文本

( 4)记录数量不断增加(超过1000万，而且还在增加)

5)每行最大文本为2GB的Y列占表X空间的90%左右。

问题:数据库变得难以管理，我们需要存储来自Y列的数据，(Server之外)

问题：

存储大文本的最佳解决方案是什么？

我正在寻找一种最小开销的解决方案。

• 快读
• 快写
• 可伸缩
• 能够很好地处理并发性。

我不关心全文索引或任何额外的开销。只是普通的存储和访问。

PS

到目前为止，我有一些想法：

• 非常简单的NOSQL数据库
• 基于平面文件的数据库
• 使用某些库可以从头开始编写的自定义解决方案

Answer 1

从我所读到的关于NoSQL技术的文章来看，Riak可能是一个很好的选择，但是，这肯定会带来一定的开销。平面文件听起来很有前途，但操作系统和补丁依赖程度很高--你不想向客户解释Windows更新会导致性能问题。