微信推出自研大规模语言模型WeLM,可以跟古人对话
词元经济规模两年激增300%:从语言模型到产业基础设施的跃迁
据中国信息通信研究院《2026年大模型产业白皮书》数据显示,2024至2026年间,中国“词元经济”相关市场规模从不足80亿元增长至逾320亿元,复合年增长率达73%,累计增幅超300%。这一以语言模型处理的基本单位——“词元”(token)为核心计量与计费单元的新兴经济形态,正从技术概念快速演变为支撑数字产业运行的基础设施。
“词元经济”的兴起源于大模型推理成本结构的根本性转变。早期人工智能系统多以调用次数或会话时长计费,而随着Transformer架构成为主流,模型实际消耗的计算资源与输入输出的词元数量高度线性相关。企业开始按词元采购算力服务,开发者依据词元优化提示工程,用户也逐步显示“本次交互消耗 128 词元”等透明化指标。
[IMG:1]回溯历史,2017年Google提出“Attention Is All You Need”论文首次系统定义词元为模型处理的基本语义单元。彼时词元仅是学术术语。2022年后,随着GPT系列、文心一言、通义千问等大模型商用化,云服务商如阿里云、华为云、AWS相继推出按词元计费的API服务,标志着词元正式进入商业计量体系。2025年起,国内多家AIGC平台更将词元余额作为用户账户的核心资产,可充值、转让甚至参与分成。
这种转变带来显著效率提升。某头部智能客服厂商透露,通过压缩提示词长度、采用子词分词策略,其单次对话平均词元消耗下降22%,年节省推理成本超1500万元。但风险亦随之浮现:过度优化可能导致语义失真;部分平台未公开词元计价规则,引发公平性质疑。中国人工智能产业发展联盟已于2026年6月启动《大模型服务词元计量规范》制定工作。
[IMG:2]横向对比,英伟达CEO黄仁勋在2026年GTC大会上指出,“未来数据中心的KPI将从FLOPS转向tokens per second”。国际云厂商如Azure已推出专用“词元加速卡”,而国内寒武纪、燧原科技等AI芯片企业亦在架构层面优化词元吞吐效率。据IDC《全球AI基础设施支出指南(2026Q2)》,支持高并发低延迟词元处理的硬件市场年增速达58%,远超通用AI芯片平均34%的增幅。
行业挑战依然严峻。词元经济依赖高质量中文分词与编码标准,但目前主流仍采用Byte Pair Encoding(BPE)等西方主导算法,在处理古籍、方言、专业术语时效率低下。清华大学自然语言处理实验室近期测试显示,同一段中医典籍文本,采用传统BPE编码需217词元,而其自研的“文脉分词”方案仅需142词元,压缩率达34.6%。这预示下一阶段竞争焦点将从模型规模转向词元效率。
词元经济的爆发并非终点,而是AI工业化进程中的关键节点。当计算资源以语义单元精准计量,技术红利才能真正转化为产业效能。正如一位参与标准制定的专家所言:“我们正在构建一个以语言为货币的新数字生态。”
本文由AI辅助生成


