首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏波波烤鸭

    shiro教程8(缓存管理)

    缓存 为什么要使用缓存   在没有使用缓存的情况下,我们每次发送请求都会调用一次doGetAuthorizationInfo方法来进行用户的授权操作,但是我们知道,一个用户具有的权限一般不会频繁的修改, 也就是每次授权的内容都是一样的,所以我们希望在用户登录成功的第一次授权成功后将用户的权限保存在缓存中,下一次请求授权的话就直接从缓存中获取,这样效率会更高一些。 xml version="1.0" encoding="UTF-8"? 3 LRU,最近最少使用的,缓存的元素有一个时间戳,当缓存容量满了,而又需要腾出地方来缓存新的元素的时候,那么现有缓存元素中时间戳离当前时间最远的元素将被清出缓存。 当调用清空缓存方法后,再次请求的时候因为缓存已经空了,所以会再次授权, 场景: 权限修改生效后,立即刷新清空缓存,则可以实现用户不退出生效新的权限

    1.4K60发布于 2019-04-02
  • 来自专栏linux教程

    CentOS 8 清除 DNS 缓存

    nscd(Name Service Cache Daemon)是一种能够缓存 passwd、group、hosts 的本地缓存服务,分别对应三个源 /etc/passwd、/etc/hosts、/etc 这里利用 nscd 的 hosts 缓存服务来实现 清除 CentOS 8 Linux 下的 DNS 缓存。 清缓存命令: 有可能nscd没装,下面讲解一下,安装,启动,清缓存的命令 1. 启动nscd 服务后,清缓存 开启 nscd 的 hosts 缓存服务后,每次内部接口请求不会都发起 dns 解析请求,而是直接命中 nscd 缓存散列表,从而获取对应服务器 ip 地址,这样可以在大量内部接口请求时减少接口的响应时间

    4.1K10编辑于 2023-04-26
  • 来自专栏Redis原理与应用

    Redis应用—8.相关的缓存框架

    xml version="1.0" encoding="UTF-8" ? xml version="1.0" encoding="UTF-8"? xml version="1.0" encoding="UTF-8"? xml version="1.0" encoding="UTF-8" ? xml version="1.0" encoding="UTF-8"?

    43800编辑于 2025-03-07
  • 来自专栏猿人工厂

    猿思考系列8——缓存的套路也就这些

    哈哈,缓存这个话题比较热,有太多的文章聊过它了。今天我们也聊聊缓存,不过可能会有些不一样的地方吧。缓存是什么?缓存其实就是计算结果。那缓存有什么作用? 分布式缓存的数据会分布到不同的缓存节点上,每个缓存节点缓存的数据依然是有容量限制的。一般来说为了方便访问这些数据节点,会假如一个代理机制去访问和识别节点。 一旦Master节点失效,可以通过代理直接切换到Slave 节点保证缓存的正常工作。每个缓存节点还可以提供缓存过期的机制,也可以会把数据可靠性要求相对较高的缓存保存到文件上,以免丢失。 一般来讲,缓存的失效问题,有以下几个常见的方面: 缓存雪崩:缓存同时失效被清除,缓存未更新,请求无法命中缓存,如果要求强制拿到数据,请求会打到数据库。如果频繁发生,数据库压力也大,应用很快挂掉的。 这就是缓存击穿,和缓存雪崩的区别在于击穿是只针对某一缓存缓存,雪崩是针对多个缓存。解决这个问题只用保障在同一时刻,一个key只有一个线程在读/写就好了。

    27930发布于 2020-07-28
  • 来自专栏小白晋级大师

    分布式系统架构8:分布式缓存

    缓存风险4.1 缓存穿透缓存风险问题也是面试常考的八股文题目,这里还是简单说明下缓存穿透:查询的数据在数据库里根本不存在,缓存里也不会有,这样的请求每次都不会命中缓存,会请求到末端数据库。 这种查询不存在数据的现象就是缓存穿透解决办法:对业务逻辑本身不能避免的缓存穿透:对返回为空的Key值进行缓存,如果数据库中对该key插入新记录,就需要主动清理缓存的key值。 ,则读数据库,再将数据写入缓存中;写数据时,先写数据库,然后失效缓存(删除缓存数据);面试可能遇到的两个关于Cache Aside的问题:1.更新先后顺序,为什么先更新数据库再删除缓存? 假设先删除缓存再更新数据库,会有一段时间是缓存已删除,数据库未更新的情况。这时如果有请求进来,缓存中没查到,就会查数据库中旧的数据,再放到缓存里。 造成问题就是:数据库已经是最新数据,缓存中还是旧的,不一致的问题;2.为什么是删除缓存,而不是更新缓存

    71810编辑于 2025-01-20
  • 来自专栏Leetcode名企之路

    缓存缓存穿透、缓存雪崩、缓存击穿

    原文:https://www.cnblogs.com/raichen/p/7750165.htm 缓存穿透 概念 缓存穿透是指查询一个一定不存在的数据,由于缓存是不命中时需要从数据库查询,查不到数据则不写入缓存 缓存雪崩 概念 大量的key设置了相同的过期时间,导致在缓存在同一时刻全部失效,造成瞬时DB请求量大、压力骤增,引起雪崩。 解决办法 从业务层面。 可以给缓存设置过期时间时加上一个随机值时间,使得每个key的过期时间分布开来,不会集中在同一时刻失效。 缓存击穿(并发) 概念 高并发系统,如果一个缓存失效,存在多进程同时查询DB,同时更新缓存。 这对缓存和DB都是比较大的挑战。 解决办法 使用互斥锁(mutex key): 这种解决方案思路比较简单,就是只让一个线程构建缓存,其他线程等待构建缓存的线程执行完,重新从缓存获取数据就可以了(如下图) ?

    2.9K20发布于 2018-10-25
  • 来自专栏山河已无恙

    K8s 镜像缓存管理 kube-fledged 认知

    写在前面 博文内容为K8s 镜像缓存管理 kube-fledged 认知 内容涉及: kube-fledged 简单介绍 部署以及基本使用 理解不足小伙伴帮忙指正 不必太纠结于当下,也不必太忧虑未来, ——村上春树 简单介绍 我们知道 k8s 上的容器调度需要在调度的节点行拉取当前容器的镜像,在一些特殊场景中, 需要快速启动和/或扩展的应用程序。 它允许用户定义镜像列表以及这些镜像应缓存到哪些工作节点上(即拉取)。因此,应用程序 Pod 几乎可以立即启动,因为不需要从镜像仓库中提取镜像。 如果镜像缓存中的镜像被 kubelet 的 gc 删除,下一个刷新周期会将已删除的镜像拉入镜像缓存中。这可确保镜像缓存是最新的。 使用 kubefledged 创建镜像缓存对象 根据 Demo 文件,创建镜像缓存对象 ┌──[root@vms100.liruilongs.github.io]-[~/ansible/kube-fledged

    43910编辑于 2024-03-06
  • 来自专栏鳄鱼儿的技术分享

    Redis缓存缓存穿透、缓存击穿、缓存雪崩

    ☘️解决思路 思路一:由于缓存穿透是因为缓存没有生效,是否可以针对DB不存在的数据设置缓存空值,让请求到缓存就OK。缓存的有效时间可以设置短点,如30s,避免误伤正常业务。 缓存击穿 缓存击穿是指数据库有,缓存没有的数据,大量请求访问这个缓存不存在的数据,最后请求打到DB可能导致DB宕机。 思路三:保证热点数据在缓存中,可以设置热点缓存数据永不过期;或者采用定时任务去定时刷新缓存数据与过期时间,保证缓存数据存在。 缓存雪崩 缓存雪崩是指数据库有,缓存没有的数据,大量请求访问这些缓存不存在的数据,最后请求打到DB可能导致DB宕机。 缓存一致性 缓存一致性指的是缓存与DB之间的数据一致性,我们需要通过各种手段来防止缓存与DB不一致,我们要保证缓存与DB的数据一致或者数据最终一致。 ☘️解决思路 思路一:先删除缓存再更新数据。

    1.1K10编辑于 2024-05-22
  • 来自专栏老铁丁D

    缓存穿透,缓存雪崩,缓存击穿

    缓存穿透 缓存穿透是指查询一个一定不存在的数据,即缓存和数据库中都没有的数据。 由于缓存不命中,并且出于容错考虑,如果从数据库查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到数据库去查询,失去了缓存的意义。 id=-1 查询一条id为-1的数据 如何解决缓存穿透 一:对查询不到的数据也做缓存处理,只是过期时间设置短一些! 缓存击穿 缓存击穿是指缓存中没有但数据库中有的数据(一般是缓存时间到期),这时由于并发用户特别多,同时读缓存没读到数据,又同时去数据库去取数据,引起数据库压力瞬间增大,造成过大压力 如何解决缓存击穿 一 ,但是缓存过期后,没有数据提供 如何解决缓存雪崩 分成事前,事中,事后三步骤 事前 一:错开设置过期时间(比如电商缓存商品可以对商品过期时间加一个随机因子,错开缓存过期时间) 发生缓存雪崩之前,事情之前

    2.1K30编辑于 2022-08-12
  • 来自专栏Java知识图谱

    Caffeine缓存 最快缓存 内存缓存

    使用Caffeine后无需使用Guava Cache,从并发的角度来讲,Caffeine明显优于Guava,原因是使用了Java 8最新的StampedLock锁技术。 二、缓存简介 (一)缓存对比 从横向对常用的缓存进行对比,有助于加深对缓存的理解,有助于提高技术选型的合理性。下面对比三种常用缓存:Redis、EhCache、Caffeine。 :缓存都是使用内存作为存储媒介的,各种缓存服务的区别如下:Caffeine是内存型缓存是指缓存与调用者属于同一个应用,准确的说属于同一个JVM;Redis是指另外一个独立进程的内存型,缓存数据存储在Redis (二)本地缓存 本地缓存与分布式缓存对应,缓存进程和应用进程同属于一个JVM,数据的读、写在一个进程内完成。本地缓存没有网络开销,访问速度很快。 Caffeine是基于Guava Cache增强的新一代缓存技术,缓存性能极其出色。 1、Map JDK内置的Map可作为缓存的一种实现方式,然而严格意义来讲,其不能算作缓存的范畴。

    3.7K30编辑于 2022-01-21
  • 来自专栏Java后端技术栈

    缓存雪崩、缓存穿透、缓存预热、缓存更新、缓存降级等问题!

    ,今天给大家整理一篇关于Redis经常被问到的问题:缓存雪崩、缓存穿透、缓存预热、缓存更新、缓存降级等概念的入门及简单解决方案。 一、缓存雪崩 缓存雪崩我们可以简单的理解为:由于原有缓存失效,新缓存未到期间(例如:我们设置缓存时采用了相同的过期时间,在同一时刻出现大面积的缓存过期),所有原本应该访问缓存的请求都去查询数据库了,而对数据库 (2)还有一个解决办法解决方案是:给每一个缓存数据增加相应的缓存标记,记录缓存的是否失效,如果缓存标记失效,则更新数据缓存,实例伪代码如下: ? 解释说明: 1、缓存标记:记录缓存数据是否过期,如果过期会触发通知另外的线程在后台去更新实际key的缓存; 2、缓存数据:它的过期时间比缓存标记的时间延长1倍,例:标记缓存时间30分钟,数据缓存设置为60 三、缓存预热 缓存预热这个应该是一个比较常见的概念,相信很多小伙伴都应该可以很容易的理解,缓存预热就是系统上线后,将相关的缓存数据直接加载到缓存系统。

    4.4K10发布于 2018-08-09
  • 来自专栏IT云清

    缓存穿透、缓存雪崩、缓存热点

    摘要:本文主要讲解在使用缓存的过程中,经常出现的三个问题:缓存穿透、缓存雪崩、缓存热点。 1.概念 缓存穿透: 大多数缓存系统,都是以key-value的格式去存储数据的,当有个请求去查询某个key,但是这个key对应的value不存在,则这个请求就会到后端DB中查询;如果有人恶意去查询缓存中不存在的 缓存雪崩: 访问量很大的系统,一般都会用缓存服务,很多请求到达在缓存层拿到值后就返回了,这样有效的减轻了DB端的压力;但是如果,缓存服务挂掉了,那所有的请求都会直接打到DB层,数据库的压力瞬间就起来了, 这样DB很可能也挂掉了,这就是缓存雪崩。 缓存热点: 一般使用缓存时,策略如下:请求一个数据,如果缓存有,直接返回,如果缓存没有,就会去查询数据库,然后返回,同时,将此key和value缓存起来,设置一个过期时间;这样做有两个好处,不仅可以加快系统对外的响应速度

    1.6K50发布于 2019-01-22
  • 来自专栏前端说吧

    HTTP缓存——协商缓存缓存验证)

    同时,客户端拿到新的资源及其修改时间与标识后,重新进行缓存。 概括如下图: 缓存验证 协商缓存就是缓存验证。 触发时机: 用户点击刷新按钮时会开始缓存验证。 格式如: etag: f7b80870fbcd8f9da18ab22d2ef1932c 特点: 当资源更新时,ETag 值也需要更新。 格式如: if-none-match: f7b80870fbcd8f9da18ab22d2ef1932c 他和If-Match的作用相反。 if-match: f7b80870fbcd8f9da18ab22d2ef1932c 或者 if-match: * 对比 首先,Etag的优先级高于Last-Modified。 下一次请求相同资源的时候,浏览器从自己的缓存中找出"不确定是否过期的"缓存

    3.3K10发布于 2021-08-25
  • 来自专栏技术博文

    Redis缓存雪崩、缓存穿透、缓存预热、缓存更新、缓存降级等问题

    一、缓存雪崩 由于原有缓存失效,新缓存未到期间,比如我们设置缓存时采用了相同的过期时间,在同一时刻出现大面积的缓存过期,所有原本应该访 问缓存的请求都去查询数据库了,而对数据库CPU和内存造成巨大压力, (2)还有一个简单方案就时将缓存失效时间分散开。 二、缓存穿透 缓存穿透是指用户查询数据,在数据库没有,自然在缓存中也不会有。 这样就导致用户查询的时候,在 缓存中找不到,每次都要去数据库再查询一遍,然后返回空(相当于进行了两次无用的查询)。这样请求就绕过缓存直接查数据库,这也是经常提的缓存命中率问题。 三、缓存预热 缓存预热这个应该是一个比较常见的概念,相信很多人都应该可以很容易的理解,缓存预热就是系统上线后,将相关的缓存数据直接加载到缓存系统。 用户直接查询事先被预热的缓存数据 解决办法 (1)直接写个缓存刷新页面,上线时手工操作下; (2)数据量不大,可以在项目启动的时候自动进行加载; (3)定时刷新缓存; 四、缓存更新 除了缓存服务器自带的缓存失效策略之外

    2.8K20发布于 2021-11-10
  • 来自专栏Clive的技术分享

    缓存穿透、缓存击穿、缓存雪崩概念及解决方案缓存穿透缓存雪崩缓存击穿

    缓存穿透 概念 访问一个不存在的key,缓存不起作用,请求会穿透到DB,流量大时DB会挂掉。 解决方案 采用布隆过滤器,使用一个足够大的bitmap,用于存储可能访问的key,不存在的key直接被过滤; 访问key未在DB查询到值,也将空值写进缓存,但可以设置较短过期时间。 缓存雪崩 概念 大量的key设置了相同的过期时间,导致在缓存在同一时刻全部失效,造成瞬时DB请求量大、压力骤增,引起雪崩。 解决方案 可以给缓存设置过期时间时加上一个随机值时间,使得每个key的过期时间分布开来,不会集中在同一时刻失效。 缓存击穿 概念 一个存在的key,在缓存过期的一刻,同时有大量的请求,这些请求都会击穿到DB,造成瞬时DB请求量大、压力骤增。

    3.6K80发布于 2018-04-19
  • 来自专栏全栈程序员必看

    Redis的缓存雪崩、缓存击穿、缓存穿透与缓存预热、缓存降级

    ② 分级缓存:第一级缓存失效的基础上,访问二级缓存,每一级缓存的失效时间都不同。 ③ 热点数据缓存永远不过期。 缓存的高可用,防止Redis宕机导致缓存雪崩的问题。 二、缓存击穿: 1、什么是缓存击穿: 缓存击穿跟缓存雪崩有点类似,缓存雪崩是大规模的key失效,而缓存击穿是某个热点的key失效,大并发集中对其进行请求,就会造成大量请求读缓存没读到数据,从而导致高并发访问数据库 而对于空数据的key有限的,重复率比较高的,则可优先采用第一种方式进行缓存。 四、缓存预热: 1、什么是缓存预热: 缓存预热是指系统上线后,提前将相关的缓存数据加载到缓存系统。 五、缓存降级: 缓存降级是指缓存失效或缓存服务器挂掉的情况下,不去访问数据库,直接返回默认数据或访问服务的内存数据。降级一般是有损的操作,所以尽量减少降级对于业务的影响程度。

    1.9K20编辑于 2022-06-29
  • 来自专栏搜云库技术团队

    Redis缓存雪崩、缓存击穿、缓存穿透 及 常见缓存模式

    一、缓存雪崩 1、什么是缓存雪崩? 如果缓存集中在一段时间内失效,发生大量的缓存穿透,所有的查询都落在数据库上,造成了缓存雪崩 由于原有缓存失效,新缓存未到期间所有原本应该访问缓存的请求都去查询数据库了,而对数据库CPU和内存造成巨大压力 可以通过缓存reload机制,预先去更新缓存,再即将发生大并发访问前手动触发加载缓存不同的key 3、双层缓存策略 C1为原始缓存,C2为拷贝缓存,C1失效时,可以访问C2,C1缓存失效时间设置为短期, C2设置为长期 4、定时更新缓存策略 实效性要求不高的缓存,容器启动初始化加载,采用定时任务更新或移除缓存 5、设置不同的过期时间,让缓存失效的时间点尽量均匀 二、缓存击穿 1、什么是缓存击穿? 后面的线程进来发现已经有缓存了,就直接走缓存 三、缓存穿透 1、什么是缓存穿透? 缓存穿透是指用户查询数据,在数据库没有,自然在缓存中也不会有。

    1.9K40发布于 2019-11-21
  • 来自专栏小明说Java

    Redis缓存雪崩、缓存穿透、缓存击穿

    缓存雪崩(数据库有,缓存没有)    缓存雪崩是指缓存同一时间大面积的失效,所以,后面的请求都会落到数据库上,数据库CPU和内存造成巨大压力,造成数据库短时间内承受大量请求而崩掉。    解决方案:    (1)缓存数据的过期时间设置随机,防止同一时间大量数据过期现象发生。    (2)给每个缓存的数据增加相应的缓存标记,记录缓存是否失效,如果缓存标记失效,则更新数据缓存。    (3)缓存预热。 重启服务时,先通过接口将热点数据存入缓存中    (4)互斥锁缓存穿透(数据库没有,缓存没有,场景一般来自攻击,高并发请求)    缓存穿透是指缓存和数据库中都没有数据,导致所有的请求都落在数据库上,造成数据库短时间内承受大量请求而蹦掉 缓存击穿(数据库有,缓存没有)    缓存击穿是指缓存中灭有但数据库中有的数据(一般是缓存时间到期)。与缓存雪崩不同的是,缓存击穿指并发查同一条数据。

    90320编辑于 2023-11-21
  • 来自专栏月梦·剑心的技术专栏

    缓存击穿、缓存穿透与缓存雪崩

    缓存是计算机系统中应用非常广泛的技术,最经典的,操作系统中处处是缓存缓存可以大大提升数据访问速率。 引入缓存之后又会面临三个新的问题,即缓存击穿、缓存穿透以及缓存雪崩。 缓存雪崩 缓存雪崩是指为一批缓存key设置了相同的过期时间,那么当这个过期时间到达时,这些缓存key同时失效,从而导致大量的访问涌入后端数据库,造成后端数据库压力陡然增大,形成缓存雪崩。 有两种情况会造成缓存雪崩: 多个缓存key同时过期 缓存系统宕机 如何解决缓存雪崩? 解决大批key同时过期: 设置多级缓存,这样即使缓存失效或者多个缓存key同时过期,也不会造成缓存雪崩. 》 本文链接:https://ymiir.netlify.app//%E5%88%86%E5%B8%83%E5%BC%8F%E7%BC%93%E5%AD%98/threecacheproblem.html

    64910编辑于 2023-12-05
  • 来自专栏JAVA杂谈

    缓存穿透、缓存击穿和缓存雪崩

    作者 | xiaowei123 出处 | https://0x9.me/Lg9yp 在Redis缓存中有三个必须要知道概念:「缓存穿透、缓存击穿和缓存雪崩。」 缓存穿透 什么是缓存穿透呢? o(╥﹏╥)o 一般我们可以想到从缓存开始出发,想如果我们给缓存设置一个如果当前数据库不存在的信息,把它缓存成一个空对象,返回给用户。 「那接下来,二哈先解释下这两种方案:」 缓存空对象 缓存空对象它就是指一个请求发送过来,如果此时缓存中和数据库都不存在这个请求所要查询的相关信息,那么数据库就会返回一个空对象,并将这个空对象和请求关联起来存到缓存中 这时候,我们就会问了呀 ~,如果大量不存在的请求过来,那么这时候缓存岂不是会缓存许多空对象了吗~~~ 没错哦! 「(2)限流降级」 在缓存失效后,通过加锁或者队列来控制读数据库写缓存的线程数量,对某个key只允许一个线程查询数据和写缓存,其他线程等待。

    1.9K31发布于 2020-11-05
领券