当前位置: 红麓网 > 工作观点

解码“词元”:智能时代的数字版“书同文”

来源:红麓网 时间:2026-07-15 08:34:49

编者按:《红麓评论》是红麓融媒体重点打造的理论评论栏目,围绕党的创新理论传播设置主题,直面党和国家发展的重大现实问题和干群关心期盼。“解码新词”主题今天刊发古丈县委党校教师周子轩的评论文《解码“词元”:智能时代的数字版“书同文”》,以飨读者。

2026年3月,全国科学技术名词审定委员会优先推荐“词元”作为人工智能领域名词token的中文名,面向全社会发布试用。这个新词一出,很快传遍各行各业,科技从业者、财经媒体和数字产业相关的工作者都在热议。

国家数据局数据显示:2026年3月,国内大模型日均“词元”调用量已经突破140万亿。对比2024年初仅千亿级别的使用规模,两年多时间,规模翻了上千倍。统一数字时代的基础“度量衡”

词元,是大模型处理文字、代码、图片、声音、视频等所有信息的具有一定语义的基本符号单元。不管是算法迭代、算力调配,还是各行各业数字化转型,全程都离不开它。统计数字产业规模、规划全国算力节点、核算AI服务成本,都要依靠它来做统一计量标准,相当于数字行业专属的基础度量衡。

把视线拉回到2002年6月,湘西里耶古井挖出37000多枚秦简。其中编号8-461的《更名方》,是当年秦始皇推行“书同文”留存下来最完整、最贴近基层的实物记录。这份竹简记录了迁陵县官吏抄录中央政令的存档,详细地写明了秦朝统一文字、官方称谓、行政用词的硬性规定。里面有一句“酉如故,更酒”,是一个非常经典的案例。

图片

里耶秦简8-461号「秦更名方」彩照。来源:复旦大学出土文献与古文字研究中心

先秦文字里,一个“酉”字有两种用法,既能指代十二地支,又能用来称呼酒水。官府文书如若未指代清楚,很容易误解语义,政令传下去就会有不同的理解。秦朝统一后,将两种含义划清边界,“酉”只用来代表地支,另外将“酒”从“酉”中分出,单独承担酒义。靠统一文字最小单元的词义分工,从源头减少文字混用带来的治理混乱。

“词元”这个定名,没有照搬外文直译或音译。“词”对应汉语本身的语义载体,“元”点明AI模型最小基础单元,贴合中文表达习惯。就像《更名方》给全国定下用字规范,如今官方推用“词元”,等于给整个数字行业划定了统一计量标尺,国内各大算力枢纽、公共算力平台标准化运营,也有了基础参照。

构筑数字领域自主“话语权”

两千多年前的“书同文”,本质是搭建一套完整、独立的表意体系,让各地形成统一认知,也是中华文明能长久延续的一套治理思路。从《更名方》也能看出来,秦朝统一文字不只是改字形,而是顺应汉语本身特点,规范词义和官方称呼,适配大一统治理的文字使用规则。

之前,AI领域的基础专业名词大多直译或音译外语词汇,行业整套表述体系依附西方,很难适配中文、古籍数字化独有的语言特点。英文天然有空格分隔词语,拆分文本简单,中文没有自带分词标记,之前的中文大模型训练、古籍数字化,一直缺少适配汉语的专属划分标准。

定名“词元”,跳出了以往一味依附外来词的习惯,依托汉字本身造词逻辑,搭建中文的AI专业名词体系,补上国内AI基础术语相关标准的空白。往后中文AI领域基础名词会逐步适配汉语的特点,构建全新的话语体系。

实现数字领域全新“大一统”

“词元”标准化落地,给数字化治理提供了能计算、能落地的参照依据。它在算力中的定位,类似电力行业的千瓦时、流量统计用的GB。统一计量单位后,数据要素能准确测算、合理定价、顺畅流转,智能制造、文旅数字化、乡村数字化建设等各类智能化升级,都有清晰可量化的参考。

普通人日常也在接触“词元”,用AI对话、写文案、线上办政务,机器解析、处理每一条信息,都以“词元”为最小单位。“词元”早已不只是单纯的技术概念。规划AI产业布局、开展行业监管、把控网络内容风险,都会用到“词元”这套计量标准。

从里耶秦简统一文字,到如今推用“词元”来确立行业标准,古人靠统一文字完成治理标准化,现在这套思路落在数字产业上,国内AI行业,在拥有自主术语、统一标准方面迈出了重要一步。