- 综合排序
- 最热优先
- 最新优先
今天 AI 记忆系统又进了一步：Engram、Claude Code、EdgeClaw 正在把“长期记忆”做成工程能力
今天 AI 记忆系统又进了一步：Engram、Claude Code、EdgeClaw 正在把“长期记忆”做成工程能力 最近一波关于 AI Agent 记忆系统的更新，很值得放在一起看。 Engram：把“摄入一次、低成本回忆很多次”做成现实 Engram Memory SDK 是一款面向智能体的开源图记忆开发库，核心思路非常直接： 在摄入阶段调用一次大模型，把实体与关系抽出来；之后回忆阶段不再依赖大模型 这套规则其实非常像一个成熟工程团队的知识管理原则： •主索引只放导航，不放正文 •主题信息按模块拆开 •原始记录保留，但只在需要时检索 •旧知识不是“资产”，很多时候反而是风险 更有意思的是它的 autoDream 记忆系统正在从“外挂检索”走向“原生架构” 过去的做法，常常是先有 Agent，再额外挂一个 RAG 或向量库。 现在的变化是：记忆已经不再是附加模块，而是开始进入系统设计的一开始。 Claude Code 直接把记忆写进工作流纪律，EdgeClaw 把记忆做成多级组件，Engram 则把记忆抽象成开发基础设施。 2.
52010编辑于 2026-04-0935倍推理加速，成本砍掉97%——DeepSeek V4要重写大模型游戏规则
:#c8e6c9styleJfill:#c8e6c9styleKfill:#c8e6c9三、Engram：给大模型装一个"外挂记忆体"如果说mHC解决的是"怎么训得稳"的问题，那Engram解决的就是" Engram的思路是：在Transformer之外，给模型加一个独立的"记忆模块"，通过高效的查找机制直接定位到需要的知识。Engram的底层是对经典N-gram模型的现代化改造。 展开代码语言：PythonAI代码解释importtorchimporttorch.nnasnnclassEngramConditionalMemory(nn.Module):"""Engram条件记忆模块 3.研究Engram开源代码DeepSeek已经在GitHub上开源了Engram模块的代码。对于有定制化需求的开发者，可以提前研究Engram的接口设计，考虑如何把它集成到自己的模型中。 ）#-评估脚本（了解benchmark性能）Engram的代码仓库结构清晰，模块化程度高。
4K120编辑于 2026-04-15- 来自专栏凯哥讲故事系列
凯哥 丨 AI 进入存算解耦的新纪元
论文提出了一个叫 Engram 的条件记忆模块：把经典 N-gram 做成现代化的 O(1) 查表记忆外挂，用确定性哈希在巨大表里秒级定位向量，再通过门控把“记忆向量”注入 Transformer 主干 在论文框架中，Engram 是一个可即插即用的模块： 基于局部上下文提取 N-gram 特征 通过 确定性的哈希 直接映射到巨大表（无需 MoE 路由网络） 以 O(1) 复杂度查到向量 再用门控把向量融合进 Engram 类模块：把高频局部静态模式“内嵌式注入”，把推理从“读文档”中解放出来。 3）模型生态：大模型主干会更像“CPU”，外挂更像“PCIe 插卡” 一旦记忆外挂成立，“模型主干”的角色会更清晰：负责推理、泛化、策略； 而“外挂模块”负责：记忆、工具、规则、领域知识、甚至合规策略。 这就是 Engram 的长期主义： 它没有用更贵的算力去压缩问题，而是用更朴素的结构把问题拆开——让“计算”去做计算，让“记忆”去做记忆。
39010编辑于 2026-01-22 - 来自专栏亨利笔记
迈向V4R2之路：揭秘DeepSeek Engram如何解放大模型算力，激发高级智能
这一思路的核心，就是给大模型做“分工”：把静态知识的存储和检索，交给专门的“记忆模块”；让核心的 Transformer 架构，专注于动态推理。 而 Engram 模块，就是“条件记忆”思路的落地实现——高效、可扩展的“AI专属档案库”。 二、Engram的“档案库”如何高效工作 Engram不是替换现有大模型的核心架构，而是作为一个新增模块融入其中，核心工作流程只有两步：检索（从档案库找资料）和融合（把资料精准用到当前任务）。 这些问题恰好指明了未来Engram 迭代的方向：增强动态更新能力、提升抗噪性和实现模块化设计，以推动其从实验室走向更复杂的产业应用。 结合 DeepSeek 年初发布的 mHC（流形约束超连接）框架，下一代模型的架构轮廓已呼之欲出了：融合 mHC 优化专家间通信效率，引入 Engram 作为独立记忆模块，形成“动态计算+静态检索”的协同模式
2.5K21编辑于 2026-01-19 - 来自专栏ceshiren0001
DeepSeek 深夜发布 Engram：比 MoE 更节能的突破，V4 架构初露端倪
没有发布会，没有营销话术，只有一篇论文和一个新模块的源码——Engram。更耐人寻味的是，这篇论文的作者列表中，再次出现了 梁文锋 的名字。 二、Engram 在做什么？一句话：该查的，别算“Engram” 是神经科学中的术语，意为 记忆痕迹。在这篇论文里，它被实现为一个可扩展、可学习、可条件触发的记忆模块。 MoE 的稀疏性，是：条件计算只激活少量专家网络Engram 的稀疏性，是：条件查找只命中极少量记忆条目两者解决的是不同问题。 可以这样理解：模块在干什么Engram快速回忆“我以前见过什么”MoE / Transformer认真思考“现在该怎么推理”在架构上，Engram 被放在较早的层级，用于模式重构与事实补全； 而深层网络 如果说 V2 / V3 的关键词是 MoE 扩展效率， 那么 Engram 暗示的，是下一阶段的主题：记忆与推理的结构性分离。
60610编辑于 2026-01-15 - 来自专栏大模型系列
万亿参数震撼发布：DeepSeek V4 MoE架构深度解析
3.2Engram（条件记忆）模块：根治“幻觉魔咒”这是DeepSeek团队于2026年初提出的革命性创新，旨在解决大模型“记不住硬核知识”的根本问题。 实现方式：Engram模块本质上是一个大型、高效的键值对（Key-Value）哈希表。模型在训练过程中，会学习将确定性的、事实性的知识（如API文档、数学公式、历史事件）压缩并存储到这个外部记忆库中。 一种新的稀疏维度：Engram被视为继MoE之后，大模型稀疏化的“新轴心”，为模型轻量化和持续学习提供了新路径。Engram的技术细节与创新Engram模块的设计灵感来源于人类大脑的记忆机制。 API成本：每百万tokens输入+输出的价格仅为24元人民币，约为GPT-5.5的1/6。显存占用：在昇腾910B上，峰值显存占用为78GB，而同等任务在H100上需要超过200GB。 全量代码库Copilot：在一个包含数百万行代码的仓库中，精准定位并解释任意函数或模块。复杂Agent任务：执行需要记忆大量中间状态和历史信息的多步骤自动化任务。
1.3K30编辑于 2026-05-14 - 来自专栏大模型系列
不是更大，而是更聪明：DeepSeek-V4用“记忆+专家”双引擎颠覆大模型范式—压缩稀疏注意力、DSA、Lightning Indexer
其核心创新在于一套名为“双轴稀疏架构”的系统性设计，该架构由两大引擎驱动：“Engram条件记忆引擎”与“MoE混合专家计算引擎”。 第二章：第一引擎——Engram条件记忆：为大模型装上“海马体”2.1设计动机：为什么需要一个独立的记忆模块？在传统模型中，所有知识都内化于神经网络的权重之中。当用户询问“巴黎是哪个国家的首都？” Engram模块旨在解决这些问题，为模型提供一个外部的、可即时访问的“活字典”。 哈希查找：Engram模块使用查询向量，在LSH索引中进行近似最近邻（ApproximateNearestNeighbor,ANN）搜索。由于哈希结构的特性，这个过程的时间复杂度接近O(1)。 Engram触发：上下文中的关键实体和短语会触发Engram模块，从其外部知识库中检索相关事实，并将这些事实作为“增强上下文”注入。
71130编辑于 2026-04-24 - 来自专栏大模型系列
解密DeepSeek-V4 预览版Engram 记忆模块、mHC 稳定训练与百万Token稀疏注意力的三大突破——百万Token上下文的智能压缩引擎
V4的三大技术突破，分别针对当前大模型面临的三大核心挑战：幻觉魔咒（HallucinationCurse）：事实性错误频发→Engram条件记忆。 第二章：第一大突破——Engram条件记忆模块：根治“幻觉”的活字典外挂2.1问题根源：为什么传统模型会“胡说八道”？传统Transformer模型将所有知识都内化于其数十亿甚至万亿的权重参数之中。 2.2Engram的设计哲学：为大模型装上“海马体”Engram模块的设计灵感直接来源于人类大脑的海马体（Hippocampus），后者负责快速、精准地检索长期记忆中的事实性知识。 Engram旨在为大模型提供一个独立的、外部的、可即时访问的“活字典”，实现条件记忆（ConditionalMemory）。 哈希查找：Engram模块使用查询向量，在LSH索引中进行近似最近邻（ApproximateNearestNeighbor,ANN）搜索。
84120编辑于 2026-04-29 - 来自专栏安徽开发者圈
AI算力成本要被颠覆？10人公司说token砍99倍
一个让硅谷侧目的数字 2026年6月23日，一家名叫Engram的AI记忆技术公司宣布完成9800万美元融资。 如果你现在每个月花100万跑AI推理，用Engram的方案可能只要1万。 天才陌生人问题 Engram的创始人Dan Biderman有个与众不同的故事。 他从小就对记忆着迷。 "数据在爆炸，成本也在爆炸，"Kleiner Perkins合伙人Leigh Marie Braswell说，"Engram做的事情就是给企业画一张组织记忆地图，让输出成本降低几个数量级。" 不是替代大模型，而是给它装上记忆 关键澄清：Engram并不是要替代OpenAI或Anthropic。 Biderman坦言，Engram的模型在通用能力上并不绝对更好。 Engram更像是一个跟你共事多年的老搭档，知道你的习惯、你的项目、你上次做了什么决定，一开口就能直击要害。 Engram这个名字本身就来自神经科学—记忆痕迹，指的是大脑中储存记忆的物理路径。
12810编辑于 2026-06-25 - 来自专栏不二小段
DeepSeek 最新论文成果，站在字节豆包的肩膀上
从 N-gram 到 Over-Encoding，再到 Engram，优化「记忆范式」 与模型的信息骨架并行的，是关于模型如何「记忆」的探索。 DeepSeek 的 Engram 模块，正是在 Over-Encoding 等工作的基础上，将「静态记忆增强」升级为了「动态条件记忆」。 Engram 的核心观点是，大模型的工作负载可以分为两部分： 1. 组合推理：需要消耗算力，由 MoE 等「条件计算」模块负责。 2. 只有与当前上下文相关的记忆才会被激活并融入到后续计算中，不相关的则被抑制。 3. 解耦：由于查找地址是确定性的，Engram 可以被设计为与主计算流程解耦的独立模块。 将大约 20%-25% 的稀疏参数预算从计算专家再分配给记忆模块，才能达到最佳性能。 小结 总的来说，mHC 和 Engram 体现出相似的演进路线，一种相互学习、相互启发的螺旋迭代。
36210编辑于 2026-04-09 - 来自专栏大模型系列
解密 DeepSeek V4：双轴稀疏 MoE + Engram 记忆 + Muon 优化器，如何打造高效万亿模型？
2.4Engram记忆架构Engram记忆架构是DeepSeekV4在长上下文处理方面的另一项重要创新。 该架构借鉴了神经科学中“记忆痕迹”（Engram）的概念，通过以下机制增强模型的记忆能力：记忆单元：在Transformer层之间插入专门的记忆单元，用于存储和检索长期依赖信息；记忆更新：采用可学习的更新规则 5.3.2智能体开发Agent框架：支持复杂的智能体开发，具备优秀的规划和执行能力；多工具集成：能够调用外部工具和API，扩展功能边界；长期记忆：通过Engram架构实现长期记忆和经验积累。 ：增强Engram架构，实现更长期、更可靠的记忆存储。 其创新的MoE架构、双轴稀疏设计、混合注意力机制、Engram记忆架构等技术突破，不仅解决了超大规模模型的效率问题，更在长上下文处理、推理性能、成本控制等方面实现了全面领先。
56720编辑于 2026-05-16 - 来自专栏安徽开发者圈
AI算力成本要被颠覆？10人公司说token砍99倍
一个让硅谷侧目的数字2026年6月23日，一家名叫Engram的AI记忆技术公司宣布完成9800万美元融资。 如果你现在每个月花100万跑AI推理，用Engram的方案可能只要1万。天才陌生人问题Engram的创始人Dan Biderman有个与众不同的故事。他从小就对记忆着迷。 数据在爆炸，成本也在爆炸，"Kleiner Perkins合伙人Leigh Marie Braswell说，"Engram做的事情就是给企业画一张组织记忆地图，让输出成本降低几个数量级。" 不是替代大模型，而是给它装上记忆关键澄清：Engram并不是要替代OpenAI或Anthropic。Biderman坦言，Engram的模型在通用能力上并不绝对更好。 Engram更像是一个跟你共事多年的老搭档，知道你的习惯、你的项目、你上次做了什么决定，一开口就能直击要害。Engram这个名字本身就来自神经科学—记忆痕迹，指的是大脑中储存记忆的物理路径。
26631编辑于 2026-06-24 - 来自专栏技术人生黄勇
春节前这波“偷袭”！DeepSeek 没官宣，但偷偷点了什么技能？
窗口只是表象，真正藏在更新里的，是mHC流形约束与Engram条件记忆两项底层架构落地。” 业内猜测，这次模型的更新，应该把之前论文提到的两项核心底层技术：mHC（流形约束超连接）与 Engram （条件记忆模块）也应用在新模型上了，只是没有公布出来。 03 — 条件记忆模块（Engram） 核心定义： Engram 是 DeepSeek 提出的“条件记忆”技术，核心目标是为大模型植入类似人类的“深层速记能力”。 2、N-gram 哈希嵌入： 使用 N-gram 切片和多头哈希映射技术，将短语存储到可扩展的静态记忆表中，实现 O(1) 的秒级检索。 Engram 关注的是“如何让模型想得更省力”，通过记忆检索解决算力浪费和显存限制。
47610编辑于 2026-03-11 - 来自专栏大模型系列
打破幻觉与成本魔咒：DeepSeek-V4 如何用双轴稀疏架构重塑大模型未来？
第二轴：Engram-条件记忆：负责高效、精准地存储和检索静态的、确定性的事实知识。 3.1Engram条件记忆模块：打造大模型的“活字典外挂”3.1.1设计动机传统模型将所有知识都编码在神经网络的权重中。 Engram模块旨在为模型提供一个外部的、可快速访问的“知识库”。 ），Engram模块的核心是一个可扩展的哈希查找表。 Engram模块会使用这个查询向量，在哈希表中进行近似最近邻（ApproximateNearestNeighbor,ANN）搜索。
62320编辑于 2026-04-24 - 来自专栏新智元
【Science】MIT研究长期记忆神经回路，海马体和新皮层记忆同时产生
【新智元导读】MIT 4月6日在 Science 上发表的一篇论文对基于记忆过程的神经回路进行了研究，首次揭示出记忆在海马体和新（大脑）皮层中的长期储存是同时形成的，而在到达成熟状态之前，这一长期记忆会保持长达两周的 研究人员说，4月6日在 Science 发表的研究结果可能会使得关于记忆巩固如何发生的主要模式发生一些修正。 此前大多数关于记忆的研究都是基于分析特定大脑区域的损伤是如何影响记忆的。然而，在2012年，Tonegawa 的实验室研发了一种标记 engram （记忆痕迹）细胞的方法，这种细胞包含记忆的痕迹。 研究人员标记了大脑三个区域的记忆细胞：海马体、前额叶皮层和存储记忆中情绪联系的基底外侧杏仁核。 研究人员在恐惧反应实验发生后一天，发现事件的记忆被存储在海马体和前额叶皮层的 engram 细胞中。 在基底外侧杏仁核中，一旦形成记忆，engram 细胞会在整个实验过程中保持不变。这些细胞，是唤起与特定记忆相关的情绪所必需的，它们会与海马体和前额叶皮层中的 engram 细胞进行通信。
1.9K40发布于 2018-03-27 - 来自专栏算法一只狗
给大模型配一本“速查手册”：DeepSeek 的 Engram 到底解决了什么问题？
在输入句子之后，模型一边正常算，一边做了一件“偷偷的事”：局部片段触发记忆：当模型读到输入句子的时候，它把这几个词的组合，当作一个“查询键”，去记忆库进行查询。 整体的框架流程论文中已经画出来了~如果用一句话概括：MoE解决的是“算得更聪明”（条件计算），Engram解决的是“记得更便宜”（条件记忆）。两者是互补结构。 关键发现：SparsityAllocation出现“U型规律”，MoE和Memory要配比论文中提出一个很有意思的实验设问：在固定总参数预算下，MoE专家参数与Engram记忆参数，怎么分配最好？ Engram的“门控（gating）”确实学会了：只在“这是一个稳定、固定的局部模式”时才强力介入，而不是对所有token都乱用记忆。 目前DeepSeek在走极致化的“稀疏”路线：MoE：计算的稀疏化Engram：存储的稀疏化如果这条路跑通，未来可能出现一种很有代表性的架构形态：小而精的推理核心+可扩展、可更新的超大记忆库。
1.3K40编辑于 2026-01-16 - 来自专栏CreateAMind
脑记忆产生和巩固建模研究总结（3假设3发现3创新符合13篇脑科学实验和假设）
PNN的仿真符合了6篇正刊、6篇子刊和1篇物理顶刊的脑科学实验和假设： The simulations of PNN fit very well in brain science experiments and hypotheses of 6 papers CNS Journals, 6 papers of CNS family Journals and1paper top Physics Journal persists throughout aging, PNN considered it may have a new and longer circuit in late iteration[18]； 6. Engram cells retain memory under retrograde amnesia. Journal of Physics Communications, 2022, 6(10): 105001.
35620编辑于 2023-09-01 DeepSeek V4全网猜测汇总：四大焦点浮出水面
焦点二：核心技术——全新架构+记忆模块，多方拆解代码细节 ● 技术层面：的猜测最为密集，核心围绕“MODEL1”架构与Engram记忆模块两大方向，均源自开发者对开源代码和论文的拆解分析。 ● 记忆模块：Engram记忆模块则因1月13日曝光的论文引发热议。该论文由DeepSeek核心研发梁文锋署名，提出“查算分离”架构，让CPU负责静态知识存储，GPU专注核心推理。 开发者拆解发现，该模块通过词汇规范化、多头哈希查找、上下文门控等机制，可使词表大小减少23%，长文本任务准确率从84.2%飙升至97%，且在MMLU、CMMLU等任务中均有3-4分的性能提升。 ● 成本方面：Engram模块带来的降本效果成为核心话题。 实测数据显示，该模块可让大模型部署成本暴降90%，原本需8张A100显卡的千亿参数模型，如今1张消费级显卡加64G内存条即可运行，硬件成本从几万美金降至1200美元左右。
1.5K20编辑于 2026-01-30- 来自专栏个人总结系列
Agent的记忆模块记住用户偏好
一、背景记忆模块离不开上下文，通常会是在某个Agent场景（namespace）、某个会话、某个用户的Agent交互信息，Agent的复杂，体现在通过上下文信息理解用户、以及懂用户的复杂，主要体现在：推理复杂性 把上下文进行记忆存储，进行后期用户画像沉淀、准确度或体验提升很关键。 DeepSeekAssistantMessage[messageType = ASSISTANT, toolCalls = [ToolCall[id = 09852 ad0589e4b2d8f69c2fc6c923767 messageType = ASSISTANT }], ToolResponseMessage { responses = [ToolResponse[id = 09852 ad0589e4b2d8f69c2fc6c923767 prefix = null, metadata = { finishReason = STOP, index = 0, role = ASSISTANT, id = edaf6c140ae62d3c51fc7034cfc2e254
42810编辑于 2026-05-18 厉害了！中国科学家最新研究成果，打破中美人工智能硬件差距
（如图，DeepSeek科学家团队提出的Engram架构） DeepSeek提出的Engram架构，正是这一技术的具体体现。 与Mixture of Experts（MoE）架构相结合，Engram通过条件记忆的方式，为每个模型输入提供快速的静态知识检索。 DeepSeek的研究团队在27B参数的模型上进行验证时，发现通过引入Engram模块，模型的长时效性推理和复杂推理任务的性能得到了显著提升。 如果我们将目光投向未来，DeepSeek的条件记忆技术无疑将成为AI领域的新标杆。随着条件记忆模块的进一步发展，我们有理由相信，AI技术将进入一个全新的阶段。 /blob/main/Engram_paper.pdf 2、DeepSeek开源大模型记忆模块！
51410编辑于 2026-03-17
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号