开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

AI绘 | “词元”：AI的最小信息积木

文章来源：企鹅号 - 洞察化学

“词元”是AI处理语言的最小单元，可以是字、词或符号。AI聊天、写文章、读内容时，都会把文字拆成词元来计算。它决定AI能记住多长内容、生成多少文字，关系到使用的计费和算力消耗，是人工智能最基础的计量标准。

（图片由豆包AI生成）

2026年3月23日，在中国发展高层论坛2026年年会上，国家数据局局长刘烈宏正式给出Token的中文名——“词元”。

作者姓名：袁莹

作者单位：西北师范大学

作者邮箱：yuanying@stu.huanghuai.edu.cn

编辑：朱真逸

审核：佘婉宁

发表于: 21小时前2026-06-10 12:01:16
原文链接：https://page.om.qq.com/page/O2ucWEjDMvWh_SdX0FP_MGTw0
腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号（企鹅号）传播渠道之一，根据《腾讯内容开放平台服务协议》转载发布内容。
如有侵权，请联系 cloudcommunity@tencent.com 删除。

相关快讯