- 综合排序
- 最热优先
- 最新优先
- 来自专栏技术成长
减少Redis内存消耗的优化措施
图片当命令请求被执行时，Redis会将数据从磁盘加载到内存中进行处理，这会导致内存的消耗。同时，一些命令可能会涉及到大量的数据操作，例如批量读取、写入或删除操作，也会对内存产生较大的压力。 以下是一些可以减少Redis内存消耗的优化措施：合理配置maxmemory参数：在Redis配置文件中，可以通过设置maxmemory参数来限制Redis使用的最大内存大小。 对于存储结构比较大的数据，可以考虑使用压缩算法进行存储，在一定程度上减少内存消耗。使用持久化方式：Redis支持将数据持久化到磁盘中，以便在重启后进行恢复。 通过将数据持久化到磁盘，可以释放一部分内存，减少内存压力。使用Redis集群：当单个Redis实例的内存达到上限时，可以使用Redis集群来扩展内存容量。 通过监听这些事件，可以及时释放相关数据的内存，减少不必要的内存占用。这些优化措施可以帮助减少Redis的内存消耗，并提高其性能和可靠性。
97371编辑于 2023-09-27 - 来自专栏本地开发环境
IDEA忽略node_modules减少内存消耗，提升索引速度
IDEA忽略node_modules减少内存消耗，提升索引速度简介在后端开发中，IDEA 在运行前端代码时，频繁扫描 node_modules 文件夹会导致高内存消耗和慢索引速度，甚至可能会导致软件卡死 这些操作可以有效提高IDE的运行性能、减少内存占用并简化项目结构，但需要注意的是，排除后将无法对该文件夹进行索引，操作文件时需谨慎。 减少内存占用：排除 node_modules 可以减少 IDE 的内存占用，因为 IDE 不需要索引这些文件。 简化项目结构：排除 node_modules 可以使项目结构更加简洁，减少不必要的文件显示在项目视图中。可以在 .idea/项目文件名.xml 文件中找到或添加这个配置项。
1.5K10编辑于 2024-09-26 - 来自专栏养虾记
优化 OpenClaw Heartbeat，大幅减少 Token 消耗
完整实战指南：通过架构重构将HeartbeatToken消耗降低95%目录问题背景与痛点分析Heartbeat工作机制深度解析优化策略与架构重构详细实施步骤进阶优化技巧监控与故障排查优化效果量化分析总结与最佳实践一 问题3：缺乏隔离定时任务在主会话中执行，产生的输出、错误信息都会保留在上下文中，进一步增加Token消耗。 定义执行时间"00***"（每天0点）--message发送给Agent的消息要执行的命令--sessionisolated在独立session中运行不污染主上下文--no-deliver不发送结果到聊天窗口减少干扰 8.1核心要点职责分离：Heartbeat只检查，Cron只执行上下文精简：HEARTBEAT.md越短越好隔离运行：Cron使用--sessionisolated按需输出：使用--no-deliver减少干扰 8.3进一步优化方向智能调度：根据任务优先级动态调整频率批量处理：合并多个小任务，减少启动开销结果缓存：避免重复执行相同任务自适应频率：根据系统负载动态调整心跳频率附录：完整命令参考展开代码语言：BashAI
2.1K21编辑于 2026-03-24 - 来自专栏丑胖侠
Solidity如何通过代码减少gas消耗
之前专门写过文章来描述如何减少gas的细节内容，这里再为大家讲解一种通过代码中memory来大幅度减少gas使用。 你会发现，setUser1需要消耗36476gas，而setUser2只需要效果31595gas，它们的效果相同，消耗的gas却差了5000gas，如果User的字段增多，那么此差距会越来越大。
72910发布于 2020-02-23 - 来自专栏涤生的博客
G1 GC：一个神奇的 JVM 参数，减少你的内存消耗
因此，字符串对象很容易就占据了约至少 30％ 的内存。然而，这些 String 对象中的大多数都是重复的，这些字符串的重复浪费了大量内存。 它还从内存中删除重复的字符串对象（字符串重复数据删除）。 HeapHero.io 会检测由于各种无效的编程习惯而浪费的内存量，当然也包括由于重复的字符串而浪费的内存量。 由于使用了 -XX:+UseStringDeduplication参数，从应用程序中删除了大量重复字符串，从而大幅度减少内存消耗。 因此，你可以利用 -XX:+UseG1GC-XX:+UseStringDeduplication来减少重复字符串导致的内存浪费，它会减少应用程序的整体内存占用。
14.2K23发布于 2019-10-08 - 来自专栏老男孩成长之路
G1 GC：一个神奇的 JVM 参数，减少你的内存消耗
因此，字符串对象很容易就占据了约至少 30％ 的内存。然而，这些 String 对象中的大多数都是重复的，这些字符串的重复浪费了大量内存。 因此，优化重复字符串对象浪费的内存是 Java 非常受欢迎的功能之一。在 G1 中，Java 就对此功能做了支持。 G1 做了什么？ G1 GC 算法运行时，它将从内存中删除垃圾对象。 即使在两次运行中都有相等数量的字符串对象（206K），由于运行第一组中重复的字符串而浪费的内存量为 5.6MB ，而在运行第二组中重复的字符串而浪费的内存量为 13.81MB 。 由于使用了 -XX:+UseStringDeduplication 参数，从应用程序中删除了大量重复字符串，从而大幅度减少内存消耗。 因此，你可以利用 -XX:+UseG1GC-XX:+UseStringDeduplication 来减少重复字符串导致的内存浪费，它会减少应用程序的整体内存占用。
2.4K10发布于 2019-12-02 - 来自专栏机器之心
训练大模型也不怕，轻量级TorchShard库减少GPU内存消耗，API与PyTorch相同
选自medium 作者：Kaiyu Yue 机器之心编译 编辑：陈 训练大模型时，如何优雅地减少 GPU 内存消耗？ 当模型拥有大量的线性层（例如 BERT、GPT）或者很多类（数百万）时，TorchShard 可以减少 GPU 内存并扩展训练规模，它具有与 PyTorch 相同的 API 设计。 然而训练这种大模型面临内存限制的问题，为了解决这个难题，研究者使用 Megatron-LM 和 PyTorch-Lightning 模型并行性扩大训练。 然而，TorchShard 会将层级参数切片到不同的等级，从而减少整个 GPU 内存。现在向 ImageNet 官方训练脚本添加一些代码，修改后的版本已经成为 TorchShard 项目的一部分。 图 2：在不同并行策略下使用标准 ResNet 训练设置（即输入大小 224 和批量大小 256）的 GPU 内存成本。
1.2K30编辑于 2023-03-29 - 来自专栏技术杂记
Percona Server 5.1 内存过量消耗分析
前言一次巡检过程中发现数据库使用内存有些过量，innodb_buffer_pool_size 设置值为 20G ，但实际物理内存消耗为 37G ，总虚拟内存消耗达 42G ，直接导致监控报警，于是开启了一次内存使用探究之旅 ，整理出来和大家分享一下----概要----发现问题巡检过程中发现mysql内存使用过量下面是 top 出来的信息，只截取了关键部分 PID USER PR NI VIRT RES
75610编辑于 2022-07-09 - 来自专栏DBA随笔
MySQL内存到底消耗在哪里？
MySQL内存到底消耗在哪里？ 一说起MySQL使用的内存，你可能会想到各种buffer，最著名的莫过于innodb buffer pool了，它是内存使用的大户，还有sort buffer等等。 binlog_cache_size: 线程级别binlog缓冲大小 thread_stack: 每个线程的堆栈大小 内存分配器： 和其他数据库一样，MySQL的内存分配器也要长时间持有一部分内存，以供正常的内存销毁和分配 ，从而实现内存重复使用。 从公式中不难看出，当基础配置不变情况下，连接数很多的时候，MySQL占用的内存数据，就会上涨的比较快。 用户维度内存监控表 memory_summary_global_by_event_name 全局维度内存监控表 每张表都有很多字段，这里不再进行一一介绍。
3.9K30编辑于 2021-12-04 - 来自专栏用户1337634的专栏
Linux进程内存消耗指标解读
了解系统的内存消耗是运维最基本的技能，但是Linux中关于内存消耗的指标很容易让人混淆，本文尝试把诸多概念解释清楚 概念 物理内存和虚拟内存 物理内存：不解释 虚拟内存：进程独享，由操作系统通过地址映射的方式 （这里的虚拟内存与操作系统使用中过程常见的虚拟内存概念不同，不要混淆了，如Linux中swap） 内存耗用指标 VSS – Virtual Set Size 虚拟耗用内存（包含共享库占用的内存） RSS S 17:12 0:00 [kthreadd] SMEM命令 smem命令可以得到USS, PSS，更能反映进程的真实内存消耗 $ smem PID User Command 实践 不用考虑VIRT耗费情况 一般也不要考虑RES内存消耗，除非一直在增大，则说明可能存在内存泄露 如果系统开始出现SWAP，就需要解决RES占用过多的问题 参考 操作系统 — 虚拟内存和物理内存的区别和联系 Linux 查看进程消耗内存情况总结 Java 进程占用 VIRT 虚拟内存超高的问题 Virtual Memory Usage from Java under Linux, too much memory
6.7K40发布于 2019-03-27 - 来自专栏爬虫资料
数据抓取的缓存策略：减少重复请求与资源消耗
传统的爬虫架构往往因请求频繁、资源消耗较大以及重复抓取等问题，导致效率低下。这些问题不仅拖慢了数据获取的速度，还可能引发目标服务器的过载风险，甚至导致爬虫被限制。缓存策略是解决这些问题的有效手段。 一、明确目标与前置知识目标了解缓存策略在爬虫中的应用，减少重复请求掌握代理 IP 配置技术（参考爬虫代理的域名、端口、用户名、密码）学会在代码中设置 Cookie 和 User-Agent针对知乎网站（ 可以使用以下命令安装：pip install requests requests_cache beautifulsoup4步骤2：实现缓存策略为了减少重复请求，我们使用 requests_cache 对请求结果进行缓存 \n") crawl_zhihu(crawl_keyword)代码说明：缓存策略：通过 requests_cache.install_cache 方法为所有请求启用缓存，减少重复请求。
73010编辑于 2025-03-25 - 来自专栏#大模型热点基础知识
如何减少Token消耗？
如何减少Token消耗？by@Laizhuocheng一、简介想象这样一个场景：你的客服机器人正在和用户对话，用户问了一个问题："这款手机的电池续航怎么样？" Token消耗的现实压力：成本压力：GPT-4按0.03美元/1000token计费，一次2万token的调用就要0.6美元延迟压力：大模型处理长上下文需要更长时间，用户体验差上下文窗口限制：大多数模型的上下文窗口有限 上下文压缩（ContextCompression）是指在保证回答质量的前提下，减少输入上下文的token数量的技术。核心思想：提高每个token的信息密度，删除冗余信息，保留关键内容。 退货等关键信息+10分高优先级：功能、特点、优势+5分可删除：非常、很、特别、超级、极其等冗余修饰词-1分句子长度：过长的句子可能包含冗余信息-2分四、上下文压缩的优缺点优势劣势显著降低成本：token消耗减少 六、总结与思考上下文压缩的本质是在保留关键信息的前提下减少token消耗，通过过滤、压缩、截断等技术手段，在成本、延迟和准确率之间找到最佳平衡点。
37710编辑于 2026-03-31 - 来自专栏程序员历小冰
一文了解 Redis 内存监控和内存消耗
所以，如果你有 10GB 的内存，最好将 maxmemory 设置为 8 或者 9G 内存消耗划分 Redis 进程内消耗主要包括：自身内存 + 对象内存 + 缓冲内存 + 内存碎片，其中 Redis 对象内存消耗可以简单理解为这两个对象的内存消耗之和(还有类似过期之类的信息)。键对象都是字符串，在使用 Redis 时很容易忽略键对内存消耗的影响，应当避免使用过长的键。 子进程内存消耗 子进程内存消耗主要指执行 AOF 重写 或者进行 RDB 保存时 Redis 创建的子进程内存消耗。 它虽然可以加快 fork 速度( 要拷贝的页的数量减少 )，但是会导致 copy-on-write 复制内存页的单位从 4KB 增大为 2MB，如果父进程有大量写命令，会加重内存拷贝量，都是修改一个页的内容 当分别开启和关闭 THP 时，子进程内存消耗有天壤之别。所以，在高并发写的场景下开启 THP，子进程内存消耗可能是父进程的数倍，造成机器物理内存溢出。
1.4K20发布于 2019-12-06 - 来自专栏程序员历小冰
一文了解 Redis 内存监控和内存消耗
引擎所消耗的内存大小。 所以，如果你有 10GB 的内存，最好将 maxmemory 设置为 8 或者 9G 内存消耗划分 Redis 进程内消耗主要包括：自身内存 + 对象内存 + 缓冲内存 + 内存碎片，其中 Redis 对象内存消耗可以简单理解为这两个对象的内存消耗之和(还有类似过期之类的信息)。键对象都是字符串，在使用 Redis 时很容易忽略键对内存消耗的影响，应当避免使用过长的键。 子进程内存消耗 子进程内存消耗主要指执行 AOF 重写 或者进行 RDB 保存时 Redis 创建的子进程内存消耗。 它虽然可以加快 fork 速度( 要拷贝的页的数量减少 )，但是会导致 copy-on-write 复制内存页的单位从 4KB 增大为 2MB，如果父进程有大量写命令，会加重内存拷贝量，都是修改一个页的内容
1.3K00发布于 2019-10-15 - 来自专栏技术博文
使用top命令查看最消耗CPU和最消耗内存的进程
快捷键shift + m ： 将进程按照内存占用从大到小排序。
2.5K60发布于 2018-04-16 - 来自专栏技术杂记
Percona Server 5.1 内存过量消耗分析4
由于 innodb_buffer_pool_size 和 query_cache_size 都是我手动配置的，所以这个差异报告让我立刻注意到了 innodb_ibuf_max_size
69910编辑于 2022-07-09 - 来自专栏云计算运维
实用脚本：检查高 CPU 内存消耗进程
它提供了当前进程的快照以及详细信息，例如用户名、用户 ID、CPU 使用率、内存使用率、进程开始日期和时间等。 1）检查高 CPU 消耗进程在 Linux 上运行了多长时间的 Bash 脚本 该脚本将帮助你确定高 CPU 消耗进程在 Linux 上运行了多长时间。 nautilus 24:14 daygeek 6301 Web 57:40 ---------------------------------------------------- 2）检查高内存消耗进程在 Linux 上运行了多长时间的 Bash 脚本 该脚本将帮助你确定最大的内存消耗进程在 Linux 上运行了多长时间。
1.8K20发布于 2021-09-16 - 来自专栏深入浅出区块链技术
Solidity优化 - 减少智能合约gas消耗的8种方法
但是，用于加载和存储数据的 gas 消耗将大大减少。 (读取 v1 是通过 SLOAD 操作执行的，仅此一项就已经消耗了 200 gas 。) 3. 连接函数参数 就像你可以从上面使用编码和解码函数来优化读取和存储数据的过程一样，你也可以使用它们来连接函数调用的参数以减少调用数据的成本。 即使这会导致交易的执行成本略有增加，但基本费用将减少，交易将变得更便宜。 由于 SSTORE 操作通常会占大部分交易成本，因此，无状态合约只会消耗有状态合约所消耗的一小部分 gas 。
4.2K20发布于 2020-11-11 - 来自专栏码农沉思录
一文了解 Redis 内存监控和内存消耗
所以，如果你有 10GB 的内存，最好将 maxmemory 设置为 8 或者 9G 内存消耗划分 Redis 进程内消耗主要包括：自身内存 + 对象内存 + 缓冲内存 + 内存碎片，其中 Redis 对象内存消耗可以简单理解为这两个对象的内存消耗之和(还有类似过期之类的信息)。键对象都是字符串，在使用 Redis 时很容易忽略键对内存消耗的影响，应当避免使用过长的键。 子进程内存消耗 子进程内存消耗主要指执行 AOF 重写 或者进行 RDB 保存时 Redis 创建的子进程内存消耗。 它虽然可以加快 fork 速度( 要拷贝的页的数量减少 )，但是会导致 copy-on-write 复制内存页的单位从 4KB 增大为 2MB，如果父进程有大量写命令，会加重内存拷贝量，都是修改一个页的内容 当分别开启和关闭 THP 时，子进程内存消耗有天壤之别。所以，在高并发写的场景下开启 THP，子进程内存消耗可能是父进程的数倍，造成机器物理内存溢出。
1.6K11发布于 2019-11-12 - 来自专栏技术杂记
Percona Server 5.1 内存过量消耗分析6
testuser几个重要参数：innodb_buffer_pool_sizeinnodb_ibuf_max_size虽然最开始我的问题定位，锁定在配置上，但是我实在是找不出有什么参数配置问题，转而开始寻求内存泄漏方向的突破
80610编辑于 2022-07-09
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号