首页
学习
活动
专区
圈层
工具
发布

为什么删除数据后,Redis内存占用依然很高?

前言 上周刚来了个应届小师弟,组长说让我带着,周二问了我这样一个问题:师兄啊,我用top命令看了下服务器的内存占用情况,发现Redis内存占用严重,于是我就删除了大部分不用的keys,为什么内存占用还是很严重...Redis提供了多种的内存分配策略,比如libc、jemalloc、tcmalloc,默认使用jemalloc。...Redis自身提供了INFO命令,可以用来查询内存的使用情况,命令如下: INFO memory # Memory used_memory:1073741736 used_memory_human:1024.00M...以上两个参数控制了清理过程中的CPU时间占比,保证了正常处理请求不受影响 总结 本文以师弟的一个疑问开头介绍了删除数据导致内存占用还是很高的原因是存在内存碎片,导致内存碎片大致分为两个原因,如下: 内存分配策略局限性...介绍了Redis清理内存碎片的方式以、自动清理的两个触发条件、保证正常处理请求的两个控制CPU时间的参数。 干货分享 最近将个人学习笔记整理成册,使用PDF分享。

2K20

服务器内存使用飙升的排查

这几天自己线上的乞丐服务器遇到一个问题,io会瞬间飙升到很高很高,造成内存使用飙升。但是实际上并发量并不大(网络连接数)。知道是哪个进程造成的,但是确实排查代码中没有是么地方会有这么大的读写。...也不知道对方到底发的什么数据导致这么大的内存占用。 之前也处理过类似的问题。麻烦之处在于很好的定位问题,重现实际的操作。没办法,只能针对socket服务特定的端口进行抓包。...服务器问题,无非就是资源不合理的使用,造成服务器内存,cpu,io,流量等相关资源出现非常不正常的波动,资源使用率飙升。对于服务器性能问题的排查,没有其他比较好的办法,只能是通过重现复盘去改进。...特别是如果服务器上跑的东西比较多,一个个的排查相当痛苦。 出现问题,首先看日志。如果是线上的,先想办法恢复服务再排查。 看看登录日志,访问日志是否有异常,确定是否有人扫机器。

28.2K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Redis删除数据后,为什么内存占用率还是很高?

    ,问题如下:Redis做了数据删除操作,为什么使用top命令时,Redis还是占了很多内存?...Redis使用多种内存分配策略,例如 jemalloc 和 libc,这些分配器无法做到按需分配,通常会按照固定大小进行分配。...例如,如果Redis申请6字节的内存,操作系统会分配8字节的内存给Redis使用,剩下的2个字节空间无法被使用就是内存碎片。但这种分配方式也有优势,可以减少向操作系统申请空间分配。...,其原理是通过scan迭代整个Redis数据,通过一系列的内存复制、转移操作完成内存碎片整理,由于此操作使用的是主线程,故会影响Redis对其他请求的响应。...朋友,希望本文对你有帮助~欢迎点赞 、收藏 、关注 三连支持一下~知道的越多,不知道的也越多,我是小许,下期见~参考:Redis删除数据后,为什么内存占用率还是很高?

    2.6K101

    师兄,为什么删除数据后,Redis内存占用依然很高?

    前言 上周刚来了个应届小师弟,组长说让我带着,周二问了我这样一个问题:师兄啊,我用top命令看了下服务器的内存占用情况,发现Redis内存占用严重,于是我就删除了大部分不用的keys,为什么内存占用还是很严重...内存分配器的分配策略 内存分配器的分配策略一般是按照固定大小来分配内存,而不是按照应用程序申请的内存空间按需分配。比如8字节、16字节、32字节.........Redis提供了多种的内存分配策略,比如libc、jemalloc、tcmalloc,默认使用jemalloc。...Redis自身提供了INFO命令,可以用来查询内存的使用情况,命令如下: INFO memory # Memory used_memory:1073741736 used_memory_human:1024.00M...以上两个参数控制了清理过程中的CPU时间占比,保证了正常处理请求不受影响 总结 本文以师弟的一个疑问开头介绍了删除数据导致内存占用还是很高的原因是存在内存碎片,导致内存碎片大致分为两个原因,如下: 内存分配策略局限性

    1.9K20

    项目突然报错,原因是内存泄漏,Java内存泄漏原因分析

    Java内存泄漏指的是程序在运行中不再使用的内存对象没有被垃圾回收机制回收,造成内存资源的浪费和不足。内存泄漏可能是由以下原因造成的: 1....静态引用过多:如果程序中过多地使用静态变量或静态集合,这些变量会在整个程序运行期间一直占用内存,导致内存泄漏。 3....内存对象被意外的保持引用:如果程序中意外地保持了某些内存对象的引用,虽然这些对象不再使用,但由于存在强引用,导致这些对象无法被垃圾回收机制回收,造成内存泄漏。 5....线程池使用不当:如果程序中使用了线程池,而线程池没有正确地关闭或者任务队列中的任务阻塞等待超时,会导致线程不能正常退出,造成内存泄漏。...因此,为了避免内存泄漏的发生,开发者应该正确地释放资源、避免过多使用静态变量或静态集合、避免使用匿名内部类或者对内存对象保持意外引用,对于线程池的使用要特别注意,及时关闭线程池和任务队列中的任务。

    83320

    Redis删除数据后,为什么内存占用率还是很高?

    在使用 Redis 时,我们经常会遇到这样一个问题:明明做了数据删除,数据量已经不大了,为什么使用 top 命令查看时,还会发现 Redis 占用了很多内存呢?...这是因为,内存分配器一般是按固定大小来分配内存,而不是完全按照应用程序申请的内存空间大小给程序分配。...Redis 可以使用 libc、jemalloc、tcmalloc 多种内存分配器来分配内存,默认使用 jemalloc。...used_memory_rss: 操作系统实际分配给 Redis 的物理内存空间,里面就包含了碎片 used_memory: Redis 为了保存数据实际申请使用的空间 mem_fragmentation_ratio...毕竟,内因的内存分配器是一定要使用的,分配策略都是通用的,不会轻易修改;而外因由 Redis 负载决定,也无法限制。所以,存在内存碎片也是正常的。

    2.8K21

    服务器内存监测

    return RetResult.success(systemInfoList); } 前端展示数据 本来想要找个轻量级的图表来绘制的,但是找来找去只有echarts可以使用...(js/EchartsMini.js) // 引入 echarts 核心模块,核心模块提供了 echarts 使用必须要的接口。...timeMarkInterval是存储定时器id的,在销毁之前释放定时器;physicMemory和heapMemory获取图表div节点,用于echarts节点获取;systemInfo则会存储定时从服务器拉取到的数据...由图可见我这个系统堆内存通常消耗不到一百兆,后续可以将堆内存设定的再小一些,以提供给其它服务使用。总体内存是稳定状态,达到一定值会自动回收垃圾,占用率不会逐步提高,是个可控的系统。...倘若jvm内存出现了溢出的情况也可以使用arthas将堆快照dump出来,结合jvisualvm来定位问题,这边暂且也没有遇到该问题,暂不做赘述。

    23.1K20

    服务器内存监测

    return RetResult.success(systemInfoList); } 前端展示数据 本来想要找个轻量级的图表来绘制的,但是找来找去只有echarts可以使用...(js/EchartsMini.js) // 引入 echarts 核心模块,核心模块提供了 echarts 使用必须要的接口。...timeMarkInterval是存储定时器id的,在销毁之前释放定时器;physicMemory和heapMemory获取图表div节点,用于echarts节点获取;systemInfo则会存储定时从服务器拉取到的数据...由图可见我这个系统堆内存通常消耗不到一百兆,后续可以将堆内存设定的再小一些,以提供给其它服务使用。总体内存是稳定状态,达到一定值会自动回收垃圾,占用率不会逐步提高,是个可控的系统。...倘若jvm内存出现了溢出的情况也可以使用arthas将堆快照dump出来,结合jvisualvm来定位问题,这边暂且也没有遇到该问题,暂不做赘述。

    22.7K40

    linux服务器内存

    早上到单位 发现服务器 mysql 服务器停了 然后起来了 查询日志 显示 内存满了 把mysql服务给杀了 linux 服务器如果 内存满了 会自动清理进程 防止服务器挂掉 选择的话 谁占的的内存大...就先杀谁 我的服务器里面 mysql服务占的内存是最大的 所以就把mysql就给杀了 image.png 然后 重启mysql 查询内存 image.png 在这说一下 怎么看linux的内存 举个例子...如下显示free是显示的当前内存的使用,-m的意思是M字节来显示内容.我们来一起看看. $ free -m total  used  free  shared  buffers  cached Mem...= used-buffers-cached = 286M ----------------- 第一部分Mem行: total 内存总数: 1002M used 已经使用的内存数: 769M free...对应用程序来讲是(-/+ buffers/cach).buffers/cached 是等同可用的,因为buffer/cached是为了提高程序执行的性能,当程序使用内存时,buffer/cached会很快地被使用

    44K10

    Linux系列(五):如何查看服务器内存使用情况

    1. free命令 free 命令显示系统使用和空闲的内存情况,包括物理内存、交互区内存(swap)和内核缓冲区内存。...,如果机器剩余内存非常小,一般小于总内存的20%,则判断为系统物理内存不够 Swap: 表示硬盘上交换分区的使用情况,如剩余空间较小,需要留意当前系统内存使用情况及负载,当Swap的used值大于0时,...则表示操作系统物理内存不够,已经开始使用硬盘内存了。...第1行数据11G表示物理内存总量;6.5G表示总计分配给缓存(包含buffers与cache)使用的数量,但其中可能部分缓存并未实际使用; 1.3G表示未被分配的内存;shared表示共享内存;4.0G...,通过“shift+m”按键将进程按照内存使用情况排序,可以查看哪些进程是当前系统中的内存开销“大户”。

    23.3K31

    为什么Linux服务器的Swap内存使用率达到100%,如何通过调整内存使用策略避免系统崩溃?

    在生产环境中,Linux服务器出现Swap使用率达到100%往往伴随着响应变慢甚至服务不可用,这对关键业务系统是灾难性的。...三、典型硬件配置与基准环境为了分析不同策略的效果,我们定义如下测试服务器www.a5idc.com硬件环境:项目参数CPUIntelXeonSilver4314(16cores@2.4GHz)内存128GBDDR4ECC...etc/sysctl.confvm.swappiness=10vm.vfs_cache_pressure=50EOFsysctl-pSwappiness行为0尽可能少用Swap,只在必要时交换10推荐用于服务器...5.3使用cgroups限制进程内存对于容器化或多租户环境,可以使用cgroups/v2进行更精细的限制:创建内存限制:展开代码语言:BashAI代码解释mkdir-p/sys/fs/cgroup/memory..."避免JVM无限制使用内存。

    2.5K10

    IBM Power7 服务器 Hypervisor 内存使用情况研究

    用于分区页面表的内存保留区域 AIX 的虚拟内存管理使用高级系统管理服务(Hypervisor services)来管理分区页面表分区页面表。...IBM Power7 服务器 Hypervisor 内存使用 Hypervisor 预留内存的大小通常与分区的数量以及分区设置的最大内存有关。在下面的内容中,将通过实验手段验证相关因素的关系。...Hypervisor 内存使用的和分配给分区物理内存的最小分配单元。...其中,2.75G 是 Hypervisor 预留内存的大小,“已分配给分区”表示目前没有内存被分区使用。...从上图可以看出,我们使用的服务器对应的编号是 40. 在上图的位置输入 40,提示符依旧,并未切换到类似如下界面,说明此台服务器还未创建分区: ?

    6.2K60

    linux服务器内存——分析篇

    早上到单位 发现服务器 mysql 服务器停了 然后起来了 查询日志 显示 内存满了 把mysql服务给杀了 linux 服务器如果 内存满了 会自动清理进程 防止服务器挂掉 选择的话 谁占的的内存大...就先杀谁 我的服务器里面 mysql服务占的内存是最大的 所以就把mysql就给杀了 image.png 然后 重启mysql 查询内存 image.png 在这说一下 怎么看linux的内存 举个例子...如下显示free是显示的当前内存的使用,-m的意思是M字节来显示内容.我们来一起看看. $ free -m total  used  free  shared  buffers  cached Mem...= used-buffers-cached = 286M ----------------- 第一部分Mem行: total 内存总数: 1002M used 已经使用的内存数: 769M free...对应用程序来讲是(-/+ buffers/cach).buffers/cached 是等同可用的,因为buffer/cached是为了提高程序执行的性能,当程序使用内存时,buffer/cached会很快地被使用

    32.7K11
    领券