首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在一个非常大的数据库中存储条目

问在一个非常大的数据库中存储条目
EN

Stack Overflow用户
提问于 2016-07-26 09:13:30
回答 1查看 70关注 0票数 1

我正在编写一个Django应用程序,它将由站点的用户输入条目。现在假设一切顺利,我得到了预期的访问者数量(不太可能,但我正在为未来做计划)。这将在一个PostgreSQL数据库中产生数亿个条目。

由于迭代这么多条目并检查它们的值不是一个好主意,所以我正在考虑将条目分组的方法。

将条目分组到一组(比方说) 100是存储这么多条目的更好的方法吗?或者有更好的方法来优化这个?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2016-07-26 10:36:39

一次只存储一个,直到你绝对不能再这样做,然后围绕你的具体问题设计其他的东西。

SQL是一种声明性语言,意思是“给我匹配X的所有记录”并不告诉db服务器如何做到这一点。因此,即使您有数亿条记录,也有很多方法可以帮助db服务器快速完成这一任务。此外,在多年的经验中,RDBMS是针对这个问题进行优化的,因此在某种程度上,您不会超过像PostgreSQL这样的系统。

因此,正如人们所说,过早的优化是万恶之源。

因此,让我们看看PostgreSQL可能通过两种方式遍历一个表来给出结果。

第一个是顺序扫描,它遍历一系列页面,扫描每个页面的值并将记录返回给您。对于非常小的表,这比任何其他方法都更有效。它在大桌子上慢。复杂度是O(n),其中n是表的大小,对于任意数量的记录。

因此,第二种方法可能是索引扫描。在这里,PostgreSQL遍历b树索引中的一系列页面来查找记录。复杂度是O(log(n))来查找每条记录。

在内部,PostgreSQL将具有固定大小的行作为页面存储在批中。它已经帮你解决了这个问题。如果你试着做同样的事情,那么在成批的记录中就会有成批的记录,这通常是不好的事情的配方。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/38585719

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档