Token定译"词元"
Token定译"词元"，我认为这是一次典型的学术抢注。
全国信息技术标准化委员会把token的中文定名为"词元"，源头是NLP时代的旧译，但问题是：2026年的token早就不是2021年的token了。
当年token确实主要切的是"词"——英文拆词根词缀，中文拆字拆词，叫"词元"，勉强说得通。
但今天呢？GPT-4o在处理图像，Sora在处理视频，音频、3D、蛋白质序列全都在被tokenize，请问一帧视频画面切出来的token，"词"在哪里？
一个已经溢出了"词"的边界的概念，你拿一个带"词"字的名字去框它，这不是翻译，这是刻舟求剑。
更值得玩味的是时机。为什么2021年定名的时候没人在意，偏偏OpenClaw烧token烧到上新闻、黄仁勋把数据中心喊成"token工厂"的时候，官方才急着盖章？
因为token变成钱了！
日均调用量从1000亿到40万亿，人民日报用"词元消耗量超过美国"来写标题——这个语感像不像"钢铁产量跃居世界第一"？
给一个计量单位命名，本质上是在铸币。 腾讯研究院提"模元"，新智元系推"智元"，学术圈守"词元"——每个名字背后都是一个利益叙事在抢话语权
叫"词元"，NLP老炮儿的定义权延续了；叫"智元"，AI产业叙事吃到红利；叫"模元"，模型公司才是印钞机。
你管它叫什么都行，反正账单上只写token。
页:
[1]