新京报客户端

好新闻 无止境

立即打开
Token为什么要有中国名?
北京网友说
2026-04-01 09:11
进入北京网友说阅读更多内容

近日,国家数据局一锤定音,央媒同步官宣:Token中文译名正式确定为“词元”。

 

消息一出,科技圈为之震动,社交平台上将近60万人参与了关于Token的讨论。这场“词元”热的背后,你是否也有诸多疑问?

 

 

到底什么是“Token”?

 

要理解这个词,首先要明白大语言模型的运作逻辑。我们以“字”为单位读书写字,对于大模型来说,输入输出的单位,就是“词元(Token)”。

 

当我们向AI提问时,AI并不是直接读懂一整句话,而是将我们发送的长段文字拆分成若干个词元,再进行理解、计算和生成回答。比如,“我爱中国!”这句话,大语言模型会将这个句子拆分为【我】【爱】【中国】【!】4个词元,然后经历“切分语言—映射编号—进行计算—生成新编号—再还原成文字”的过程。

 

简单来说,词元就是AI理解人类语言的“最小单元”。

 

为什么选中“词元”?

 

其实,关于Token的译名之争由来已久。区块链圈叫它“代币”,AI圈有人直译“令牌”,还有人跟着海外习惯直接念英文。同一个词,不同场景叫法不同,造成理解不便。统一命名,迫在眉睫。

 

在这场命名中,曾出现过多个候选译名:“模元”“智元”“标记”“令牌”“偷啃”……但最终,“词元”脱颖而出。

 

为何是这两个字?

 

“词”点明其在语言场景下的根源,体现出token与表达对象语义的密切关联;“元”传达出“基本单元”之意,与“元素”等术语中的“元”保持一致的语义脉络,意思是“基本、根本、构成事物的最小单位‌”。

 

二字合璧,“词元”指的就是大模型处理信息的最小单元。这个翻译,既没有模糊不清的歧义,又精准指明了背后的单位属性,兼具中文翻译的“信达雅”。

 

“词元”为什么重要?

 

词元并不是凭空产生的。它是由高性能的GPU在消耗大量电能、完成数千亿次推理运算后产生的数字资产。每生成一个词元,都对应着真实的推理过程,也对应着真实的电力消耗和算力消耗。因此,词元不仅是大语言模型处理文本的最小单位,更是计费的基本单位——它具有智能时代可计量、可定价、可交易的特征。

 

和手机流量一样,词元消耗量越大,意味着AI产品被使用越频繁、产业商业化程度越高。

 

到今年3月,我国日均词元调用量已经超过140万亿。与此同时,截至3月15日,中国AI大模型的周调用量连续第二周超越美国,全球调用量排名前三的位置,更是被中国模型包揽。

 

对于普通用户而言,词元消耗量是收费的定价标准。因此,未来面对AI服务时,我们能够分析有多少词元被运用在高价值的答案生成之中,从而更聪明地使用AI。

 

 

 

 

 

左右滑动查看更多

 

可以说,词元是数据、算法、算力三大核心要素的交汇点,它直接衡量并决定着用户的使用感受、企业的长远发展,乃至一个国家的AI竞争力。

 

为什么要有中国名?

 

理解了词元的重要性,再来看“定名”这件事,意义就完全不同了。

 

第一,让AI技术真正融入中文语境。技术的发展终归是为人服务,必将回落到我们语言、文化、生活之中。“词元”定名后,搜索指数直线攀升。这表明在中国,一个能被中文理解的名字,是公众认知技术的第一把钥匙,能够提升公众的AI使用体验和AI素养。

 

第二,为AI商业化进程确立关键标准。国家数据局局长刘烈宏表示:“Token‘词元’不仅是智能时代的价值锚点,更是连接技术供给与商业需求的‘结算单位’,为商业模式的落地提供了可量化的可能。”这是产业走向成熟的必经之路。有了统一的计量单位,AI才能像电力、通信一样,成为清晰可计量的公共服务。

 

第三,产业链的话语权回归。回望信息技术发展史,每一个基础术语的命名权,背后都是产业链的话语权。今天的全球AI竞赛,除了算法和算力,标准、生态、话语权这些“软实力”正在成为决定胜负的关键变量。“词元”的定名,意味着中国AI在基础术语层面走向了“定义者”。

 

“词元”,寥寥几笔,分量却极重。科技圈常说:“AI的尽头是算力,算力的尽头是电力。”“词元”的诞生,让我们看到了中国AI更深层的底气。

 

“十四五”时期,我国建成全球最大、发展最快的可再生能源体系。与此同时,“算电协同”被写入2026政府工作报告,成为中国新基建战略中的核心概念。

 

我们有幸见证一个AI时代的到来,也有自信参与这个世界的构建,这份参与可以是从一个中国名字开始……


展开全文
全文
0字
您已阅读
%

特别声明:本文为新京报客户端新媒体平台"新京号"作者或机构上传并发布,仅代表该作者或机构观点,不代表新京报的立场及观点。新京报仅提供信息发布平台。

打开新京报APP 阅读更多精彩资讯
相关推荐
Token为什么要有中国名?
新京号
财经观察:中国靠什么成为“世界Token工厂”
新京号
Token突然爆发,它为何成为AI竞争核心?
新京号
中国AI大模型调用Token量何以连续霸榜
新京号
电力Token化出海,中国的电即将算全球的题
财经
AI智能体正加速落地 个人电脑“养虾”不再需要手动部署
新京号
阿里重组AI战线 “握指为拳”,悟空事业部首度浮出水面
新京号
英伟达豪掷200亿美金押注的新赛道,中国的解题人是个华为老兵
新京号
算力吃紧 云厂商集体涨价
新京号
感谢美国:五毛一度的中国电,换个姿势就能卖11元
新京号

新京报报料邮箱:82708677@bjnews.com.cn