词元是大模型处理文本的最小计算单位,2026年5月20日被国家标准定名为“词元”;中文一字约1—2词元,英文一词约0.75词元;其数量决定算力消耗与计费,无法跳过或关闭。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

理解人工智能中的Token,是看懂大模型如何处理文字、为何收费、甚至为何耗电的根本起点。它不是字数,不是单词,也不是加密手段,而是大模型真正“看见”和“运算”的最小单位——全国科学技术名词审定委员会与国家数据局已于2026年5月20日正式将其标准中文名定为【词元】,终结了长期混用的“标记”“令牌”“子词”等非规范译法。
词元不是字,也不是词
中文里一个汉字≈1—2个词元,标点、空格、换行符各自单独算1个词元;英文里一个常见单词≈0.75个词元。例如输入“救命!”,表面3个字符,实际被分词器切为“救”“命”“!”和隐藏的换行符共4个词元。这一步由模型内置的Tokenizer完成,不可跳过,也无需手动干预。
误以为“中文一字一词元”会导致成本预估严重偏差。比如“智慧海事,守护航行”这句话,看似8个汉字+1个逗号,实则被拆成“智慧”“海事”“,”“守护”“航行”5个词元——因为“智慧”在多数中文分词器中已被训练为高频双字单元,不再拆开。
词元是计算单位,不是价值单位
方法一:从模型内部看 当你输入“你好”,AI看到的不是两个汉字,而是两个整数ID:92543、92728。这两个数字对应词表中固定位置的词元,模型所有参数运算都基于这些ID展开。词元本身不携带语义,语义来自它在上下文中的位置与权重组合。
方法二:从工程计费看 企业调用API时,账单上显示“消耗127个词元”,这个数字是输入+输出总词元数之和。输入“写一封辞职信”,模型先编码为32个词元;生成586字回复后,解码为约412个词元;合计444个词元计入费用。注意:【输出词元数永远≥输入词元数,且无法提前精确预估】。
为什么词元成本正在变贵
第一步:识别真实消耗源头 每次词元处理,都触发模型全部参数的一次前向传播。以1750亿参数模型为例,每处理1个词元,需完成约350万亿次浮点运算。
第二步:追踪能量转化路径 这些运算全部依赖GPU集群持续供电。实测显示:处理100万个词元平均耗电1.2千瓦时,相当于点亮12盏LED灯工作1小时。所谓“Token成本”,本质是电力成本经算力厂商加价后的转嫁。
第三步:确认不可绕过环节 目前所有主流大模型(Qwen、DeepSeek、Claude、GPT系列)均采用固定词表+动态分词策略,不存在“关闭词元计量”或“跳过分词”的技术路径。任何声称“免Token调用”的服务,要么限于极简指令(如开关灯),要么将词元隐匿计入套餐包底价。











