首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏皮振伟的专栏

    内存回收

    前言: 前文《内存映射技术分析》描述了虚拟内存的管理、内存映射;《物理内存管理》介绍了物理内存管理。 本篇介绍一下内存回收内存回收应该是整个Linux的内存管理上最难理解的部分了。 可见,这条路径确实比较慢,所以系统在内存比较紧张的时候,就会比较卡,kswapd也会相对活跃。 5,shrinker 在 shrink_slab中: ? 会调用所有的shrinker。 对于一个page,首先需要判断它是否可以被 回收,比如说kernel被load进的内存,是不能回收的,用户进程使用mlock来lock住的内存,也是不能回收的。 9,kswapd 内核线程,负责内存回收。zone的watermark不满足的时候,就需要唤醒kswapd来回收内存。 10,lru list 内存回收lru选择那些内存需要回收。 后记: 虚拟内存的管理,内存映射,物理内存管理,内存回收,差不多就是Linux内存管理的主要功能了。 Good Luck~

    3.9K100发布于 2018-04-09
  • Redis内存回收

    1.Redis内存回收Redis之所以性能强,最主要的原因就是基于内存存储。然而单节点的Redis其内存大小不宜过大,会影响持久化或主从同步性能。 因此,Redis内部会有两套内存回收的策略: 内存过期策略 内存淘汰策略 1.1.内存过期处理存入Redis中的数据可以配置过期时间,到期后再次访问会发现这些数据都不存在了,也就是被过期清理了。 因此Redis允许设置内存告警阈值,当内存使用达到阈值时就会主动挑选部分KEY删除以释放更多内存。这叫做内存淘汰机制。 1.2.1.内存淘汰时机那么问题来了,当内存达到阈值时执行内存淘汰,但问题是Redis什么时候会执去判断内存是否达到预警呢? 而如果设置了其它策略,则会在每次执行命令后判断占用内存是否达到阈值。如果达到阈值则会基于配置的淘汰策略尝试进行内存淘汰,直到占用内存小于阈值为止。关于 LRU 和 LFULRU是最近最久未使用。

    71810编辑于 2024-08-29
  • 来自专栏秃头哥编程

    Redis内存回收策略

    Redis会因为内存不足而产生错误,也会因为回收过久而导致系统长期的停顿,因此了解掌握Redis的回收策略十分重要。 当Redis的内存达到规定的最大值时,可以进行配置进行淘汰键值,并且将一些键值对进行回收。 我们打开Redis安装目录下的redis.conf文件。 noeviction:不淘汰任何键值对,当内存满时,如果进行读操作,例如get命令,它将正常工作,而做写操作,它将返回错误,也就是说,当Redis采用这个策略内存达到最大的时候,它就只能读不能写了。 在配置文件中,有一个参数maxmemory-samples,它的默认值是5,如果采用volatile-ttl算法,我们可以看看下面这个过程,假设有7个即将超时的键值对 ? 对于垃圾回收的策略,还需要控制回收的时间。

    2.8K20发布于 2019-06-17
  • 来自专栏JavaEdge

    垃圾收集策略静态内存分配和回收动态内存分配和回收1 Java堆内存回收2 回收无效对象的过程3 方法区的内存回收4 垃圾收集算法5 Java中引用的种类

    静态内存分配和回收 静态内存分配是指在程序开始运行时由编译器分配的内存,在被编译时就已经能够确定需要的空间,当程序被加载时系统把内存一次性分配给它,这些内存不会在程序执行时发生变化,直到程序执行结束时才回收内存 包括原生数据类型及对象的引用 这些静态内存空间在栈上分配的,方法运行结束,对应的栈帧撤销,内存空间被回收. 动态内存分配和回收 在程序执行时才知道要分配的存储空间大小,对象何时被回收也是不确定的,只有等到该对象不再使用才会被回收. 堆和方法区的内存回收具有不确定性,因此垃圾收集器在回收堆和方法区内存的时候花了一点心思. 1 Java堆内存回收 1.1 判定回收的对象 在对堆进行对象回收之前,首先要判断哪些是无效对象即一个对象不被任何对象或变量引用 老年代中对象存活率高,无额外空间对其分配担保,必须使用"标记-清理"或"标记-整理" 新生代中存放"朝生夕死"的对象,用复制算法,只需要付出少量存活对象的复制成本,就可完成收集 5 Java中引用的种类

    1.4K101发布于 2018-05-16
  • 来自专栏每日分享java架构小知识

    Redis-内存回收

    1 内存回收   Reids 所有的数据都是存储在内存中的,在某些情况下需要对占用的内存空间进行回收内存回收主要分为两类,一类是 key 过期,一类是内存使用达到上限(max_memory) 触发内存淘汰。 1.1 过期策略   要实现 key 过期,我们有几种思路。 问题:如果都不过期,Redis 内存满了怎么办? 1.2 淘汰策略   Redis 的内存淘汰策略,是指当内存使用达到最大内存极限时,需要使用淘汰算法来决定清理掉哪些数据,以保证新数据的存入。 (5)allkeys-lru:从数据集中挑选最近最少使用的数据淘汰。 (6)allkeys-lfu:从数据集中挑选使用频率最低的数据淘汰。 如果没有符合前提条件的 key 被淘汰,那么 volatile-lru、volatile-random 、volatile-ttl 相当于 noeviction(不做内存回收)。   

    1.6K50发布于 2020-10-27
  • 来自专栏全栈程序员必看

    【Redis】内存回收策略

    1.删除过期键对象 惰性删除 定时任务删除 2.内存溢出控制策略 volatile-lru:从已设置过期时间的数据集(server.db[i].expires)中挑选最近最少使用的数据淘汰

    63610编辑于 2022-08-10
  • 来自专栏golang+php

    php内存泄漏,内存溢出,垃圾回收

    当一个 php-fpm 进程被销毁后,它所占用的所有内存都会被回收。 垃圾回收 一、概念 垃圾回收机制是一种动态存储分配的方案。它会自动释放程序不再需要的已分配的内存块。 垃圾回收机制可以让程序员不必过分关心程序内存分配,从而将更多的精力投入到业务逻辑。 即: 每个内存对象都分配一个计数器,当内存对象被变量引用时,计数器+1; 当变量引用撤掉后(执行unset()后),计数器-1; 当计数器=0时,表明内存对象没有被使用,该内存对象则进行销毁,垃圾回收完成 但是当两个或多个对象互相引用形成环状后,内存对象的计数器则不会消减为0;这时候,这一组内存对象已经没用了,但是不能回收,从而导致内存泄露的现象。 php5.3开始,使用了新的垃圾回收机制,在引用计数基础上,实现了一种复杂的算法,来检测内存对象中引用环的存在,以避免内存泄露。

    4K20发布于 2020-09-07
  • 来自专栏Java学习专栏博客

    内存分配与回收策略

    内存分配与回收策略对象的内存分配,就是在堆上分配(也可能经过 JIT 编译后被拆散为标量类型并间接在栈上分配),对象主要分配在新生代的 Eden 区上,少数情况下可能直接分配在老年代,**分配规则不固定 ,所以 Minor GC 非常频繁,一般回收速度也比较快。 Major GC / Full GC:回收老年代,出现了 Major GC,经常会伴随至少一次的 Minor GC,但这并非绝对。 大对象直接进入老年代大对象是指需要大量连续内存空间的 Java 对象,如很长的字符串或数据。 (还记得吗,新生代采用复制算法回收垃圾)长期存活的对象将进入老年代JVM 给每个对象定义了一个对象年龄计数器。

    51810编辑于 2023-07-01
  • 来自专栏爱撸猫的杰

    JVM内存分配与回收

    1.3 长期存活的对象将进入老年代 既然虚拟机采用了分代收集的思想来管理内存,那么内存回收时就必须能识别那些对象应放在新生代,那些对象应放在老年代中。 它可以将内存分为大小相同的两块,每次使用其中的一块。当这一块的内存使用完后,就将还存活的对象复制到另一块去,然后再把使用的空间一次清理掉。这样就使每次的内存回收都是对内存区间的一半进行回收。 4.垃圾收集器 如果说收集算法是内存回收的方法论,那么垃圾收集器就是内存回收的具体实现。 虽然我们对各个收集器进行比较,但并非为了挑选出一个最好的收集器。 ,在每次YGC之后和再次发生Mixed GC之前,会检查垃圾占比是否达到了此参数,只有达到了,下次才会发生Mixed GC 5. (默认整堆5%)   -XX:G1MaxNewSizePercent:新生代内存最大空间   -XX:TargetSurvivorRatio:Survivor填充容量(默认50%)   -XX:MaxTenuringThreshold

    1.9K20发布于 2020-03-12
  • 来自专栏全栈程序员必看

    内存分配与回收策略

    内存分配与回收策略 对象优先在 Eden 分配 大多数情况下,对象在新生代 Eden 区中分配。当 Eden 区没有足够空间进行分配时,虚拟机将发起一次 Minor GC。 Minor GC:指发生在新生代的垃圾收集动作,因为 Java 对象大多都具备朝生夕灭的特性,所以 Minor GC 非常频繁,一般回收速度也比较快。 大对象直接进入老年代 大对象是指需要大量连续内存空间的 Java 对象,如很长的字符串或数据。 虚拟机提供了一个 -XX:PretenureSizeThreshold 参数,令大于这个设置值的对象直接在老年代分配,这样做的目的是避免在 Eden 区及两个 Survivor 区之间发生大量的内存复制

    99730编辑于 2022-07-21
  • 来自专栏EffectiveCoding

    Go 内存管理 -- 垃圾回收

    本篇要说的就是垃圾回收,常见的垃圾回收算法有标记-清除、标记整理、复制,然后在这些算法基础上有分为分代&非分代回收,这些算法都非常优秀,只是面对的场景不同罢了,但是要是想透彻的理解垃圾回收,看Java中的实现再合适不过了 ,如果能对于Java中的垃圾回收非常熟悉,理解go的垃圾回收将非常简单。 image.png 很显然如果使用标记清除算法: 1、确定标记的起点GCRoot 2、存在一定的内存碎片 3、效率相对于复制、整理 效率要稍微高一些 但标记清除是最常见的垃圾回收算法,Java 4、之后遍历灰色集合,将灰色对象引用的对象从白色集合放入灰色集合,之后将此灰色对象放入黑色集合 5、重复 4 直到灰色中无任何对象 6、通过write-barrier检测对象有变化,重复以上操作 关于整体回收这一块儿内容,大家有兴趣可以看一下源码。 关于go的垃圾回收暂时就先介绍这么多。 关于go的内存管理后续会单独出一个系列,所以本系列仅仅阐述了一个内存管理的梗概和基础概念。

    1.2K41发布于 2019-07-31
  • 来自专栏epoos.com

    weakSet与js内存回收

    $ node --expose-gc index.js // 第一次垃圾回收,当前内存使用情况:1.76MB // 第二次垃圾回收,当前内存使用情况:18.54MB // 第三次垃圾回收,当前内存使用情况 :1.77MB // 第二次垃圾回收,当前内存使用情况:18.54MB // 第三次垃圾回收,当前内存使用情况:18.54MB 比较1、2例子可以发现,当引用类型key的值指向为空的时候,使用WeakMap toFixed(2)}MB`); }, 100) // 结果 // 第一次垃圾回收,当前内存使用情况:1.77MB // 第二次垃圾回收,当前内存使用情况:18.54MB // 第三次垃圾回收,当前内存使用情况 :18.54MB // 第N次垃圾回收,当前内存使用情况:18.55MB // ... // 第N次垃圾回收,当前内存使用情况:2.00MB // 第N次垃圾回收,当前内存使用情况:2.01MB --- ,当前内存使用情况:1.76MB // 第二次垃圾回收,当前内存使用情况:18.54MB, // 当前Map的长度: 1 // 第三次垃圾回收,当前内存使用情况:18.54MB, // 当前Map

    1.6K20编辑于 2022-06-06
  • 来自专栏Lixj's Blog

    内存分配与回收策略

    主要有以下策略: 对象优先在 Eden 区分配 大对象直接进入老年代 长期存活的对象将进入老年代 动态对象年龄判定 空间分配担保 这个内容之前在 垃圾收集器与内存分配策略 里面 ,想想还是单独列一篇算了 新生代 GC(Minor GC):指发生在新生代的垃圾收集动作,因为 Java 对象大多具备朝生夕灭的特性,所以 Minor GC 非常频繁,一般回收速度也比较快。 二、大对象直接进入老年代 大对象是指需要大量连续内存空间的 Java 对象,例如很长的字符串以及数组等。 这样可以避免在 Eden 区以及两个 Survivor 区之间发生大量的内存复制。 PretenureSizeThreshold 这个参数只对 Serial 和 ParNew 两种收集器有效。 Copyright: 采用 知识共享署名4.0 国际许可协议进行许可 Links: https://lixj.fun/archives/内存分配与回收策略

    1.1K10编辑于 2022-06-10
  • 来自专栏大数据学习与分享

    JVM垃圾回收器、内存分配与回收策略

    串行收集器在进行垃圾回收时只使用一个CPU或一条收集线程去完成垃圾回收工作,并且会暂停其他的工作线程(stop the world),直至回收完成。适用于运行在client模式下的JVM。 一般的垃圾回收器是在尽量短的时间内进行垃圾回收,这样程序与用户交互的时间间隔比较小,不会出现长时间的卡顿现象。 如果我们需要调优,在内存一定的情况下,可以考虑修改该参数,当然还要根据实际业务场景来处理。 :对各个Region的回收价值和成本进行排序,根据用户所期望的GC停顿时间来制定回收计划 内存分配与回收策略 对象的内存分配主要是指在Java堆上的分配,通常会优先分配在新生代,然后经历一系列GC后仍然存活的对象会进入到老年代 -Xms:设置初始化堆内存,-Xmx设置最大堆内存,设置为相等可防止内存抖动(剩余内存大于70%、小于40%时,自动触发内存扩大或缩小) 1.

    89610发布于 2020-08-10
  • 来自专栏文渊之博

    python内存回收的问题

    python实际上,对于占用很大内存的对象,并不会马上释放。 举例,a=range(10000*10000),会发现内存飙升一个多G,del a 或者a=[]都不能将内存降下来。。 del 可以删除多个变量,del a,b,c,d 办法: import gc (garbage collector) del a gc.collect() 马上内存就释放了。

    1.5K10编辑于 2022-05-06
  • 来自专栏站长运维

    内存管理和垃圾回收

    内存管理和垃圾回收 Golang 的内存管理和垃圾回收 Golang 作为一种高性能的编程语言,其内存管理和垃圾回收机制也是非常重要的。 本文将介绍 Golang 的内存管理和垃圾回收机制,并给出一些优化建议。 1. 内存管理 1.1 内存分配 在 Golang 中,我们可以使用 make 和 new 函数来分配内存。 1.2 内存释放 在 Golang 中,不需要手动释放内存,因为 Golang 具有自动垃圾回收机制。当一个对象没有任何引用时,它将被垃圾回收器自动回收。 2. 如何优化垃圾回收 为了优化 Golang 的垃圾回收机制,我们可以采取以下措施: 3.1 减少内存分配 尽可能地重用现有的对象,避免频繁地分配和释放内存。 这种技术可以将文件映射到内存中,从而使操作系统负责管理内存分页和缓存,而不是由应用程序自己来管理内存5. 结论 Golang 的内存管理和垃圾回收机制是其高性能和稳定性的关键因素。

    52410编辑于 2023-11-28
  • 来自专栏大数据学习与分享

    JVM内存管理、直接内存和垃圾回收

    笔者将按下图分多篇文章详细阐述JVM: 1.jpg 本篇文章主要叙述JVM内存管理、直接内存、垃圾回收和常见的垃圾回收算法: 运行时数据区域 JVM在执行一些基于JVM运行的程序,典型的如Java 3.png 5. 程序计数器 程序计数器是线程私有的即每个线程都会有自己的程序计数器,用来记录线程执行的字节码位置,是一个没有OOM的区域。 垃圾收集 垃圾收集即GC,是JVM进行内存回收的处理过程。 开发人员更多的是关注业务需求的实现,而内存管理是交由JVM完成的,如果不进行或者错误的进行垃圾回收会导致程序不稳定甚至崩溃。 Java提供的GC功能可以自动监测对象是否超过作用域等从而达到自动回收内存的目的,可以有效防止内存泄露,有效的使用可用内存。 GC主要分为3种:minor GC、major GC和full GC。 优点:这样使得每次都是对整个半区进行内存回收内存分配时也就不用考虑内存碎片等复杂情况,只要移动堆顶指针,按顺序分配内存即可,实现简单,运行高效。

    1.9K00发布于 2020-07-15
  • 来自专栏藏经阁

    【JavaScript】垃圾回收内存管理(内存优化)

    垃圾回收原理 Java和JavaScript都是是使用垃圾回收的语言,也就是说执行环境负责在代码执行时管理内存,通过自动内存分配管理实现内存分配和闲置资源回收。 随后垃圾回收程序做一次内存清理,销毁带有标记的所有值并回收它们的内存内存管理 在使用垃圾回收的编程环境中,开发者无序关心内存管理。不过JavaScript运行在一个内存管理与垃圾回收都很特殊的环境。 不过要注意,解除对一个值的引用并不会自动导致相关内存回收。解除引用的关键在于确保相关的值已经不再上下文里了,因此它在下次垃圾回收时会被回收。 理论上,如果能够合理使用分配的内存,同时避免多余的垃圾回收,那就可以保住因内存释放而损失的性能。

    1.6K50编辑于 2023-03-14
  • 来自专栏一只程序原

    JVM内存与垃圾回收篇第5章虚拟机栈

    1.5、设置栈内存大小 设置栈内存的大小 我们可以使用参数 -Xss 选项来设置线程的最大栈空间,栈的大小直接决定了函数调用的最大可达深度。 局部变量表中的变量也是重要的垃圾回收根节点,只要被局部变量表中直接或间接引用的对象都不会被回收。 = 10;int i6 = ++i5; 字节码指令 bipush 10 :将 10 压入操作数栈 istore 5 :将操作数栈中的 10 保存到变量 i5 中 iinc 5 by 1:变量 i5 由于操作数是存储在内存中的,因此频繁地执行内存读/写操作必然会影响执行速度。 不能保证不溢出 分配的栈内存越大越好么? 不是,一定时间内降低了OOM概率,但是会挤占其它的线程空间,因为整个虚拟机的内存空间是有限的 垃圾回收是否涉及到虚拟机栈?

    61320编辑于 2022-08-22
  • 来自专栏Android&Java技术

    Java内存管理与垃圾回收

    Java内存管理与垃圾回收 一、内存简介 根据《Java虚拟机规范(第2版)》的规定,Java虚拟机所管理的内存将会包括以下几个运行时数据区域,如下图所示: ? 经常有人把Java内存区分为堆内存(Heap)和栈内存(Stack),这种分法比较粗糙,Java内存区域的划分实际上远比这复杂。 二、垃圾回收机制 垃圾回收(Garbage Collection,GC):在程序的运行环境中,JVM(Java虚拟机)提供了一个系统级的垃圾回收器线程,它负责自动回收那些无用对象所占用的堆内存。 这种内存回收的过程被称为垃圾回收。 Java语言中,内存回收任务由JVM来担当。 Java的垃圾回收机制是JVM提供的能力,由单独的系统级垃圾回收线程在空闲时间以不定时的方式动态回收无任何引用的对象占据的堆内存空间。

    1.2K20发布于 2020-02-27
领券