首页
学习
活动
专区
圈层
工具
发布

为什么删除数据后,Redis内存占用依然很高?

前言 上周刚来了个应届小师弟,组长说让我带着,周二问了我这样一个问题:师兄啊,我用top命令看了下服务器的内存占用情况,发现Redis内存占用严重,于是我就删除了大部分不用的keys,为什么内存占用还是很严重...操作系统中对于内存分配也是一样的,比如应用需要申请一块连续N个字节的空间,虽然剩余内存总量大于N个字节,但是没有一块连续的内存空间是N个字节,那么剩余的空间就是内存碎片。如下图: ?...内存分配器的分配策略 内存分配器的分配策略一般是按照固定大小来分配内存,而不是按照应用程序申请的内存空间按需分配。比如8字节、16字节、32字节.........这样就避免了一次的内存分配。如下图: ? 但是坏处也很明显,申请的和分配的空间不一样,则剩余的空间很可能形成内存碎片,一旦内存碎片多了,内存利用率也会随之降低,这是很可怕的。...以上两个参数控制了清理过程中的CPU时间占比,保证了正常处理请求不受影响 总结 本文以师弟的一个疑问开头介绍了删除数据导致内存占用还是很高的原因是存在内存碎片,导致内存碎片大致分为两个原因,如下: 内存分配策略局限性

1.9K20

Redis删除数据后,为什么内存占用率还是很高?

,以及内存碎片和如何清理内存碎片。...而主进程消耗又主要包括自身内存、对象内存、缓冲区内存、内存碎片四个方面:自身进程占用内存Redis进程自身所占用的内存,这部分内存通常很小,一个空的Redis进程所消耗的内存几乎可以忽略不计数据对象内存对象占用的内存是...命令看到的数据结果,是从操作系统层看到的数据maxmemory:Redis 最大可用内存,0表示不限制,我们一般会设置这个值,避免所有内存超过物理内存内存为何没释放Redis 释放的内存空间会由内存分配器管理...我们继续看看什么是内存碎片内存碎片前面我们已经了解了Redis占用内存的组成以及如何查看内存占用信息,接下来看什么是内存碎片和导致出现内存碎片的原因。...朋友,希望本文对你有帮助~欢迎点赞 、收藏 、关注 三连支持一下~知道的越多,不知道的也越多,我是小许,下期见~参考:Redis删除数据后,为什么内存占用率还是很高?

2.3K101
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    师兄,为什么删除数据后,Redis内存占用依然很高?

    前言 上周刚来了个应届小师弟,组长说让我带着,周二问了我这样一个问题:师兄啊,我用top命令看了下服务器的内存占用情况,发现Redis内存占用严重,于是我就删除了大部分不用的keys,为什么内存占用还是很严重...操作系统中对于内存分配也是一样的,比如应用需要申请一块连续N个字节的空间,虽然剩余内存总量大于N个字节,但是没有一块连续的内存空间是N个字节,那么剩余的空间就是内存碎片。如下图: ?...内存分配器的分配策略 内存分配器的分配策略一般是按照固定大小来分配内存,而不是按照应用程序申请的内存空间按需分配。比如8字节、16字节、32字节.........这样就避免了一次的内存分配。如下图: ? 但是坏处也很明显,申请的和分配的空间不一样,则剩余的空间很可能形成内存碎片,一旦内存碎片多了,内存利用率也会随之降低,这是很可怕的。...以上两个参数控制了清理过程中的CPU时间占比,保证了正常处理请求不受影响 总结 本文以师弟的一个疑问开头介绍了删除数据导致内存占用还是很高的原因是存在内存碎片,导致内存碎片大致分为两个原因,如下: 内存分配策略局限性

    1.8K20

    Redis删除数据后,为什么内存占用率还是很高?

    实际上,这是因为,当数据删除后,Redis 释放的内存空间会由内存分配器管理,并不会立即返回给操作系统。所以,操作系统仍然会记录着给 Redis 分配了大量内存。...但是,这往往会伴随一个潜在的风险点:Redis 释放的内存空间可能并不是连续的,那么,这些不连续的内存空间很有可能处于一种闲置的状态。...Redis内存碎片的形成可以由两方面引起 内因是操作系统的内存分配机制 外因是 Redis 的负载特征 内因:内存分配器的分配策略 内存分配器的分配策略就决定了操作系统无法做到“按需分配”。...这是因为,内存分配器一般是按固定大小来分配内存,而不是完全按照应用程序申请的内存空间大小给程序分配。...这表明内存碎片率已经超过了 50%。一般情况下,这个时候,我们就需要采取一些措施来降低内存碎片率了。 如何清理内存碎片?

    2.6K21

    Java本地内存LoadingCache介绍

    一、本地缓存设计思路 如果让我们去设计一个本地缓存,需要考虑以下问题: 1、数据存储结构如何设计 本地缓存应该是要能高效的查找,因此数据的存储结构很关键; 最简单的设计就是一个大的HashMap,这样在多线程写的时候会有问题...,当然也可以用并发场景下高性能的ConcurrencyHashMap;当然还可以自己设计底层的存储结构; 2、如何限制本地缓存的大小 为什么要限制,因为内存是宝贵的资源,作为容错处理必须有相应的参数设置本地缓存占用内存大小...,具体来说是按内存大小,还是其它维度?...二、LoadingCache介绍 LoadingCache是大名鼎鼎的Google的Guava包的一个本地缓存接口(Guava是一个优秀的类库,具体就不在这里介绍了,有兴趣的同学可以自己百度下),定义如下

    2.7K30

    pycharm本地远程连接服务器,并在本地调试服务器代码

    path: 部署在Linux上的路径,即本地文件会被上传到当前路径。...Projectb Interpreter右侧设置选择Add | SSH Interpreter | Existing server configuration 如图所示5步添加Python解释器,因为之前配置过远程本地服务器...在Mappings选项, 填写本地工程所在位置Local path, 服务器项目所在位置Deployment path(根目录之后的path) 启动SSH Terminal:Tool | Start...补充: 本地服务器是在本局域网内,不用通过因特网或拔号连接的服务器,远程服务器 则反之,服务器默认开放端口是1433,要连接时候客户端也要同样要设端口为1433。...,并在本地调试服务器代码 使用PyCharm进行远程开发和调试 Remote Debugging with PyCharm ↩︎

    10.9K20

    哪个更快:Java 堆还是本地内存

    在这篇文章中,我会给你演示一个对象是怎样以连续的字节码的方式在内存中进行存储,并且告诉你是应该怎样存储这些字节,是在Java堆中还是在本地内存中。...最后我会就怎样从JVM中访问内存更快给一些结论:是用Java堆还是本地内存。...对于随机地址访问,堆内存仅仅比本地内存慢一点点,并且是针对大块连续数据的时候,而且没有慢很多。...最后的结论 在Java中使用本地内存有它的意义,比如当你要操作大块的数据时(>2G)并且不想使用垃圾回收器(GC)的时候。从延迟的角度来说,直接访问本地内存不会比访问Java堆快。...这样的结论对使用本地还是堆的ByteBuffer同样适用。使用本地ByteBuffer的速度提升不在于访问这些内存,而是它可以直接与操作系统提供的本地IO进行操作。

    90540

    哪个更快:Java堆还是本地内存

    最后我会就怎样从JVM中访问内存更快给一些结论:是用Java堆还是本地内存。...在本地内存中分配一个对象 让我们来将下面的Java对象放到本地内存中: ? 我们所做的仅仅是把对象的属性放入到Memory中: ? ?...结论:跨越JVM的屏障来读本地内存大约会比直接读Java堆中的内存慢10倍,而对于写操作会慢大约2倍。...结论:在做连续访问的时候,Java堆内存通常都比本地内存要快。对于随机地址访问,堆内存仅仅比本地内存慢一点点,并且是针对大块连续数据的时候,而且没有慢很多。...最后的结论 在Java中使用本地内存有它的意义,比如当你要操作大块的数据时(>2G)并且不想使用垃圾回收器(GC)的时候。从延迟的角度来说,直接访问本地内存不会比访问Java堆快。

    1.3K20

    服务器内存监测

    而对于程序员而言,如何避免内存泄漏也是一门学问,倘若不加以控制,那么无论多大的内存都会有消耗殆尽的那天。...本文当然不是研究如何分析内存泄漏的产生原因与解决方案,而是在此之前的一步,通过简单的内存监测方式来预测内存泄漏的 潜在可能性 或者 偶发性 等。...我这边需要监测 系统内存 与 jvm堆内存 ,最终的结果会展示各个时间点的内存情况,所以需要一个时间类,表示每个切片的时间点。...timeMarkInterval是存储定时器id的,在销毁之前释放定时器;physicMemory和heapMemory获取图表div节点,用于echarts节点获取;systemInfo则会存储定时从服务器拉取到的数据...由图可见我这个系统堆内存通常消耗不到一百兆,后续可以将堆内存设定的再小一些,以提供给其它服务使用。总体内存是稳定状态,达到一定值会自动回收垃圾,占用率不会逐步提高,是个可控的系统。

    21.7K20

    PowerBI本地部署服务器

    本期呢,白茶决定分享给各位小伙伴们,PowerBI本地服务器的配置与搭建。 [1240] 首先是我们为什么需要学习本地服务器的部署?...其次,是技术相对于成熟,本地部署服务器是基于SQL服务,而SQL在中国市场已经运营了很多年,适应了本地市场。...[1240] 这里的话可以不做改动,但是白茶的朋友和白茶说了,所有本地网络的端口默认都是80,为了本地的网络安全,劝白茶修改一下(白茶也不知道,因为不是科班出身),不过还是改一下吧。...[1240] 到这里,我们的本地部署服务器基本上就已经完成了。 [strip] 检验我们的服务器是否可以运行。...[1240] 这样的话我们就可以直接在软件中对服务器中的报表进行编辑了。 (白茶刚才没有上传文件,所以这里是空的。) 至此,本地服务器部署已经完成。 * * * 小伙伴们❤GET了么?

    5.3K50

    搭建Git本地服务器

    参考文章:http://www.ossxp.com/doc/git/gitolite.html 当前任务,学习中… 公司小范围用法: 服务器上做的: 在服务器上建立一个用户,这里命名为git。...生成的密钥会在window下: “C:\Documents and Settings\userName\.ssh”,有两个文件,复制id_rsa.pub的内容给服务器管理员(邮件或直接QQ吧!)。...下面小组成员应该可以正常访问服务器了(对了,在此之前,需要安装ssh服务器 : apt-get install ssh) 项目组老大要做的: 做一个基本项目原型,供项目成员克隆下载..., 将已有文件推送到git服务器上 新建文件夹,git init 初始化git 。...origin,方便以后使用,名字随便改) 推送到服务器 git push origin master 意思是 : git 推送 到 服务器目录 哪个分支—master 。

    5K30

    服务器内存监测

    而对于程序员而言,如何避免内存泄漏也是一门学问,倘若不加以控制,那么无论多大的内存都会有消耗殆尽的那天。...本文当然不是研究如何分析内存泄漏的产生原因与解决方案,而是在此之前的一步,通过简单的内存监测方式来预测内存泄漏的 潜在可能性 或者 偶发性 等。...我这边需要监测 系统内存 与 jvm堆内存 ,最终的结果会展示各个时间点的内存情况,所以需要一个时间类,表示每个切片的时间点。...timeMarkInterval是存储定时器id的,在销毁之前释放定时器;physicMemory和heapMemory获取图表div节点,用于echarts节点获取;systemInfo则会存储定时从服务器拉取到的数据...由图可见我这个系统堆内存通常消耗不到一百兆,后续可以将堆内存设定的再小一些,以提供给其它服务使用。总体内存是稳定状态,达到一定值会自动回收垃圾,占用率不会逐步提高,是个可控的系统。

    21.3K40

    linux服务器内存

    早上到单位 发现服务器 mysql 服务器停了 然后起来了 查询日志 显示 内存满了 把mysql服务给杀了 linux 服务器如果 内存满了 会自动清理进程 防止服务器挂掉 选择的话 谁占的的内存大...就先杀谁 我的服务器里面 mysql服务占的内存是最大的 所以就把mysql就给杀了 image.png 然后 重启mysql 查询内存 image.png 在这说一下 怎么看linux的内存 举个例子...空闲的内存数: 232M shared 当前已经废弃不用,总是0 buffers Buffer 缓存内存数: 62M cached Page 缓存内存数:421M 关系:total(1002M) = used...记住内存是拿来用的,不是拿来看的.不象windows, 无论你的真实物理内存有多少,他都要拿硬盘交换文件来读.这也就是windows为什么常常提示虚拟空间不足的原因.你们想想,多无聊,在内存还有大部分的时候...,拿出一部分硬盘空间来充当内存.硬盘怎么会快过内存.所以我们看linux,只要不用swap的交换空间,就不用担心自己的内存太少.如果常常 swap用很多,可能你就要考虑加物理内存了.这也是linux看内存是否够用的标准哦

    43.3K10

    java的栈内存和堆内存_Java本地方法栈

    介绍Java语言有关内存分配的知识。Java语言把内存分为两种:栈内存和堆内存。...栈内存 在方法中定义的一些基本类型的变量和对象的引用变量都在方法的栈内存中分配,当在一段代码块中定义一个变量时,Java就在栈内存中为这个变量分配内存空间,当超出变量的作用域后,Java会自动释放掉为该变量所分配的内存空间...堆内存 堆内存用来存放由 new 运算符创建的数组或对象,在堆中分配的内存,由Java虚拟机的垃圾回收器来自动管理。...,但仍然占据内存空间不放,在随后一个不确定的时间被垃圾回收器收走(释放掉),这也是Java比较占内存的原因。...数组声明之后,接下来就要分配数组所需的内存,这时必须用运算符new,利用new运算符为数组元素分配内存空间的方式称为动态内存分配方式。

    1.5K10

    JVM 本地内存跟踪(Native Memory Tracking in JVM)

    出于多种原因和可能的优化,JVM 会在堆外再向操作系统申请额外 “本地内存”(native memory.)。这些额外申请最终可能使进程占用的内存突破 -Xmx 的上限。...本教程将: 枚举 JVM 中常见的本地内存来源,并给出对应的调优参数; 演示如何使用 Native Memory Tracking(NMT) 工具实时监控这些内存。 2....本地内存的构成(Native Allocations) 虽然 Java 堆通常是占用最大的一块,但 JVM 还会从本地内存中划出相当可观的区域,用来存放类元数据、JIT 生成的代码、内部数据结构等。...2.6 本地直接缓冲区(Native Byte Buffers) 除 JVM 自身外,开发者也可通过 JNI 的 malloc 或 NIO 的 DirectByteBuffer 直接申请本地内存。...结论 本文梳理了 JVM 本地内存的主要组成部分及其调优参数,并示范了如何利用 NMT 进行在线监控。借助这些信息,我们可以更精准地调优应用、合理规划容器或物理机的内存配额。

    86920
    领券