首页
学习
活动
专区
圈层
工具
发布

#token

DecentMem 双池记忆:借鉴强化学习的利用与探索设计,Token 消耗降了近一半

deephub

基于大语言模型的多智能体系统有一个问题就是所有智能体共享一个存储库。这样会限制着性能、可扩展性和多样性。

4210

DGX Spark 极限压榨!深度优化 DeepSeek-V4:35token/s、单机承载 766K 上下文多智能体服务

GPUS Lady

极长上下文会小幅拉高单 token 延迟:248K 上下文约 146ms/token,519K 上下文约 177ms/token;超长上下文优势是并发承载量与缓...

4910

Token降本50%:Harness工作流的成本优化实践

腾讯云开发者

代码图谱的 token 节省不只体现在单次查询上,更重要的是减少了 Agent 的探索轮次。少一轮工具调用,就少一次 API 请求,就少一整个 context ...

15110

Google DeepMind 发了三款新模型,token 更少,质量更高,成本没涨

用户11563501

根据 Google 的数据,3.6 Flash 在 Artificial Analysis Index 上平均少用 17% 的输出 token。在某些 Deep...

7500

23-长上下文训 练为什么需要SequenceParallel

anzhsoft

第 22 篇把 mini-batch、micro-batch 和 dynamic batch size 拆开了:算法窗口、GPU 执行切片、token 重新装箱...

3900

我上线了Token共享与交换平台AITokenBus,让你免费无限用AI

www.tangshuang.net

腾讯 | 前端开发工程师 (已认证)

故事的开始是这样的:有一次,我正在使用AI完成某个任务,突然提示,你的套餐用量已经消耗完了,此时,看着做到一半的任务,我却束手无策。

11010

怒省99%Token!代码能力提升10倍,又一开源办公神器来了

OpenNiuma

常规AI编码工具处理大型仓库时,会反复读取文件消耗大量上下文资源,这款MCP服务工具通过预构建代码知识图谱,把代码结构转为可快速查询的结构化数据,降低资源消耗,...

10310

开源了!花了10亿token, 我把这个整支设计团队力量的神级技能开源了! Codex史诗级必备技能!

OpenNiuma

于是,这个项目诞生了。累计消耗了超过10亿token的算力,终于把一支完整设计团队的能力,浓缩进了一个Skill里。今天,它正式开源了。

17310

你的 AI 员工可能在「摸鱼」:今天 50% 的 Token 正在被浪费

AI约翰

会动手的智能体,正从「回答问题」走向「自主执行任务」;可控,才是它上岗的第一前提。

7210

从 Token 价格战到成功任务单位经济学:AI 成本战的真正主线(上)

张善友

模型刚开始从实验室走向现实世界时,行业最先关心的就是 token 单价、API 费用、上下文长度、模型大小,以及谁能在相同预算下跑得更远。这个逻辑在 AI 早期...

7310

深入理解 Token:大模型的"基本单位"

翰墨飘香

计算机不认识文字,只认识数字。所以在模型处理任何文本之前,都要先经过一道分词(Tokenization)工序:把连续的文字切成一个个最小处理单元,这个单元就叫 ...

15700

Context压缩与Token优化:让长文档对话不爆上下文

陆业聪

• 月之暗面发布Kimi K3,同期智谱AI年化收入(ARR)突破10亿美元,国产大模型商业化节奏明显加快。

13910

防范时序攻击:为什么在 Go 中比较 Token/签名必须使用 crypto/subtle?

技术圈

用 == 比较两个 API Token,居然会让黑客在网络另一端逐位猜出你的正确凭证?这可不是危言耸听,而是安全领域里非常经典的侧信道时序攻击(Timing A...

8610

WAIC 2026观察:当Token成为算力新标尺,AI一体机迎来价值重估

Alter聊科技

Token需求爆发,推动AI一体机从交付设备转向交付产能。超聚变打通建设、提效、运营与应用闭环,让Token价值在业务一线兑现。

13810

大部分token根本不该重复计算,不止于KVCache

用户11563501

核心观察很简单:Transformer 里大部分 token 只关注自己附近的上下文,只有很少一部分 token 需要跨文档计算注意力。CacheBlend 只...

12910

19.7K Star!让AI代码审查省82倍Token!这个开源项目太狠了!

开源星探

刚好前几天我发现了 code-review-graph 这个开源项目。它的slogan很直接:"Stop burning tokens. Start revie...

14900

Token越便宜,管理越值钱

mixlab

Shadow:AI用得越好的人,管理能力往往也不差。但现在一个新问题正在浮现 —— token烧了,人也招了,业务却没跟着涨。这才是企业真正该警惕的。

5510

爆省98%!Claude Code 拓展六层Token极致优化全方案

OpenNiuma

AI代码开发场景下,无限制文件扫描、冗余自然语言、无边界工具调用、无规范推理逻辑会持续吃掉大量上下文Token,长会话极易出现上下文溢出、代码检索效率下滑问题。...

22410
领券