搜索 | 中文 | EN

词元经济纳入国家工作体系 战略性新赛道加速成形

时间:2026-08-29 阅读:6 来源:

日前,学习时报高端智库版刊发文章,围绕“词元经济”的运行规律、发展态势与宏观治理展开探讨。文章指出,自今年3月人工智能模型处理信息的基础单位token被正式命名为“词元”以来,各界围绕词元经济的研究、讨论与实践持续升温,国家层面已将推动词元经济发展纳入工作体系,以行业高质量数据集建设和全国一体化算力网建设为着力点,深入推进数据要素市场化配置改革。

文章认为,词元经济是以词元生产、流通和应用为核心的一系列经济活动,将催生新的经济形态,加速经济社会智能化进程,为数据要素价值释放开辟新路径,是智能经济中创新密度最高、迭代速度最快、产业牵引力最强的部分。当前,我国词元经济蓬勃兴起,词元调用量指数级增长,核心产业快速扩张,正加速融入经济社会各领域,成为发展新质生产力和深入推进数字中国建设的战略性新赛道。

那么,词元究竟是什么?文章介绍,词元是大模型处理信息的最小语义单元,是人机深层沟通的通用语言,也是智能时代的通用度量衡。2017年,谷歌将词元作为Transformer架构输入及输出的标准单位。近年来,随着Transformer架构及大语言模型的广泛使用,词元逐渐成为模型处理和生成文本的基本计量单元。

2026年3月,国家数据局正式将Token中文译名确定为“词元”,并将其定位为“智能时代的价值锚点”,词元由此成为经济社会领域的热点话题。值得注意的是,词元并非天然存在,而是由大模型经过分词、向量化表示、位置编码、语义关系建模、上下文关联分析、概率计算等一系列“词元化”操作后输出的产物。

经过这一过程,文字、图像、音频等多种模态数据转化为易于处理、可被理解的语义单元。与数字化中的比特数据只忠实编码、传输、存储物理世界信息不同,作为意义单元的词元能够捕捉比特数据背后的语义信息,让机器“看懂”物理世界,深刻重塑人与机器的关系。

文章还指出,词元的生产是数据、算力、模型推理等多因素综合作用的结果,是刻画人工智能产出的度量标准。它打破了算力(以FLOPs计量)、数据(以PB计量)与模型算法(以参数量计量)互不通约的物理壁垒,成为跨越不同技术架构与应用场景的统一标尺。词元的度量标尺作用多元且通用,可用于衡量模型性能,如预训练阶段的词元处理量直接反映模型知识广度,词元生成速度衡量模型推理效率;也可用于衡量经济社会的智能含量,如个人词元处理量反映其使用人工智能服务的程度,企业词元消耗量代表其数智化转型的程度。

业内普遍认为,随着词元经济不断成熟,其运行规律和治理路径将持续成为各方关注焦点。未来,围绕词元生产、流通和应用的制度设计或将为数据要素价值释放和智能经济高质量发展提供有力支撑。