我正在开发一个处理传入数据的应用程序,目前需要访问每个传入数据点的数据库。问题有两个:
的结果
第一个想法是将关系数据库中的数据缓存到类似Redis的东西中,以提高查找速度。但是,所有的常规缓存策略都依赖于这样一个事实:如果需要,您可以返回数据库并从中获取数据。这在我的例子中是有问题的,因为对于95%的查询,数据库中没有任何内容,而且缓存中没有任何东西可以存储。当然,我可以将空结果存储在缓存中,但这意味着缓存存储的95% (甚至更多,取决于数据的组合)将是垃圾。
最好的方法是实现一个没有任何遗漏的缓存系统:来自数据库的所有东西都存在于缓存中,因此如果缓存中没有缓存,那么它就不在数据库中。不过,我环顾四周后发现,Redis的一致性似乎不足以始终做出这样的假设--如果Redis中不存在密钥,我如何100%地确定数据库中不存在它(假设我们没有处于更新过程中)?这是一个强烈的要求,如果数据库中有一个关于传入数据池的行,那么就需要找到它,而不能错过它。
如何设计一个始终具有与关系数据库相同的数据的缓存系统--而不需要在数据库中查找数据?Redis可能不是工具,但您推荐什么呢?是否有一个模式或关键字,我应该查找,但我没有想到?
发布于 2022-06-28 11:44:49
数据库中已经有这样一个缓存:共享缓冲区。因此,您所要做的就是设置足够大的shared_buffers,以包含整个数据库并重新启动。不久,整个数据库将被缓存,读取将不会导致更多的I/O,并将是快速的。
如果您不能缓存整个数据库,只要您只需要访问其中的一部分,这也是可行的: PostgreSQL将只缓存正在使用的8KB页面。
在我看来,添加另一个外部缓存系统再好不过了。如果数据被修改,则尤其如此:任何外部缓存系统都必须确保其数据不过时,这将带来额外的开销。
https://stackoverflow.com/questions/72785304
复制相似问题