词元经济的运行规律、发展态势与宏观治理
开宝体育官网为你整理相关体育消息:
文/国家数据发展研究院院长 胡坚波 当前我国词元调用量呈指数级增长、词元经济核心产业加快发展、词元应用领域快速拓展、各地加快词元经济战略布局,但是也给数据供给体系、数算网电基础设施、产业生态以及治理机制等带来了全方位的冲击与挑战。
自今年3月,人工智能模型处理信息的基础单位token被正式命名为“词元”以来,各界围绕词元经济的研究、讨论与实践热情高涨。
国家层面将推动词元经济发展纳入工作体系,以行业高质量数据集建设和全国一体化算力网建设为着力点,深入推进数据要素市场化配置改革,推动词元经济高质量发展。
围绕如何认识与把握词元经济这一新的经济形态,学习时报高端智库版刊发此文进行探讨。
词元经济是以词元生产、流通和应用为核心的一系列经济活动,将催生新经济形态,加速经济社会智能化进程,为数据要素价值释放开辟新路径,是智能经济中创新密度最高、迭代速度最快、产业牵引力最强的部分。
我国词元经济蓬勃兴起,词元调用量指数级增长,核心产业快速扩张,正在加速融入经济社会各领域,成为发展新质生产力和深入推进数字中国建设的战略性新赛道。
词元经济具有独特内涵与规律 词元是大模型处理信息的最小语义单元,是人机深层沟通的通用语言,也是智能时代的通用度量衡。
2017年,谷歌将词元作为Transformer架构输入及输出的标准单位。
近年来,随着Transformer架构及大语言模型广泛使用词元,词元逐渐成为模型处理和生成文本的基本计量单元。
2026年3月,国家数据局正式将Token中文译名确定为“词元”,并将其定位为“智能时代的价值锚点”,词元由此成为经济社会领域的热点话题。
词元并非天然存在的,而是由大模型进行分词、向量化表示、位置编码、语义关系建模、上下文关联分析、概率计算等一系列“词元化”操作后输出的产物。
经过这一过程,文字、图像、音频等多种模态的数据就转化为了易于被处理、可以被理解的语义单元。
与数字化中的比特数据只忠实地编码、传输、存储物理世界的信息不同,作为意义单元的词元,可以捕捉到比特数据背后的语义信息,让机器“看懂”物理世界。
因此,从这个意义上说,词元是人与机器进行深层沟通的通用语言,正深刻重塑人与机器的关系。
词元的生产是数据、算力、模型推理等多因素综合作用的结果,是刻画人工智能产出的度量标准。
它彻底打破了长期以来算力(以FLOPs计量)、数据(以PB计量)与模型算法(以参数量计量)互不通约的物理壁垒,成为跨越不同技术架构与应用场景的统一标尺。
词元的度量标尺作用是多元的、通用的,可用来衡量模型性能,比如预训练阶段的词元处理量可直接反映模型的知识广度,词元生成速度可以衡量模型推理效率;
可以用来衡量经济社会的智能含量,比如个人的词元处理量可以反映个人人工智能服务使用的程度,企业的词元消耗量代表企业数智化转型的程度,产业的词元使用量可以成为判断人工智能赋能千行百业的指标,一国的词元调用总量则可以衡量国家智能经济的体量和活跃度;
可以是价值尺度和结算工具,用来计量和结算人工智能服务费用。
当物理世界中的万事万物都可以通过词元化转换为机器可处理的序列时,整个世界就可以被计算、重组和预测,物理世界和数字世界的自主联通就有了新桥梁。
词元度量衡作用的深度推进,将激发经济社会智能化进程,进而加速人类社会迈向智能经济新时代的历史进程。
词元经济内涵及其与数据价值释放、智能经济的关系。
词元经济是以词元的生产、流通为核心,以词元应用实现各领域价值增值和效率提升为外延的一系列经济活动。
词元经济包括核心和扩展两个部分。
其中,核心部分由词元生产与词元流通构成。
词元生产是将算力、数据、模型转化为承载智能的词元的过程,涵盖用于词元生产的算力产业、数据产业和模型产业。
词元流通是通过标准化定价和市场交易实现词元高效配置与价值发现的过程,涵盖服务词元流通过程中的数据服务商、算力租赁商、模型厂商、应用程序编程接口(API)交易平台等构成的相关产业。
扩展部分是指各行各业通过深度应用词元实现成本节约、效率突破或模式创新所带来的价值增值,是词元经济赋能效应的集中体现。
词元经济将催生新经济形态,加速经济社会智能化进程。
信息技术的每一次演进升级,都会重塑信息流的形态,进而强化其引导物资、资金等要素优化配置的价值创造力,最终引发企业竞争优势、产业结构乃至经济形态的深层变革。
过去30多年的数字化历程,本质上是将现实世界的信息转化为计算机可以处理的比特数据,使信息摆脱了物理载体的束缚,实现了无损复制、光速传输、海量存储与快速计算,由此催生了互联网、移动通信、云计算等一系列划时代的变革,形成了网络经济、信息经济等新形态,并加速了各领域数字化、网络化进程。
词元经济的发展,将推动原始数据转化为语义词元,将人脑理解复杂语境、把握模糊意图、推理未知问题的智能赋予机器,将带来新的产业革命,催生新的经济形态,并加速
更多体坛动态,关注开宝体育官网。