您当前的位置 : 太原新闻网 >> 万花筒

词元,怎么突然就火了?

来源:人民日报海外版 作者:刘发为 2026年04月03日 09:56

  最近,“词元(Token)”这个词突然火了起来。

  相信在不少人心里,都有一个问号:词元为啥这么火?

  要解开这个疑惑,不妨先把“词元”本身弄清楚。

  啥是词元?

  词元,原本只是一个在技术圈流通的专业术语,说的是AI处理文本时的基本单位,是大模型处理信息的最小单元。

  这么说可能有点太过专业,通俗来解释就是,在AI时代,词元可以是一个词、一段代码,也可以是图像或视频中的一个像素区块。当你向AI工具提问的时候,工具里的模型会先把你的话分解成一个个小的词元,在算力“算”完后把结果的相应词元拼回成答案。

  既然是AI时代的产物,为何最近才突然火起来?毕竟AI早已进入大家的视野了。

  这里,不能不提最近爆火的“龙虾”。

  不管是OpenClaw,还是QClaw等诸多版本,“龙虾”扩散的速度之快超乎想象,越来越多身边人养上了“龙虾”。

  为何“龙虾”爆火把词元也给带火了呢?

  原因一说你就明白了:过去,我们与AI的相处模式主要是人机对话,我们提出诸如“词元是什么?”“‘龙虾’怎么养?”等等生活中面临的问题,请AI给出答案。这种情况下,AI对词元的调用量是“被动”式的,也就是说,只有我们向AI发问的时候,AI大模型才会思考,才会调用词元来解答和处理我们的问题。

  而现在,各路“龙虾”的横空出世,让局面变得完全不同了。AI不再是被动式响应的对话框,而是长出了智能体,有了“感知—决策—执行”的闭环能力,换句话说,AI能“主动”干活了,这种情况下,词元的消耗量就大大增加了。

  爆火的,不只是“龙虾”。

  各种AI工具不断出现,触角不断延伸到我们生活和工作的方方面面。

  AI给大家带来越来越多的便利,也让大家养成了使用AI甚至与AI共生的习惯。

  各位看官,不妨打开自己的手机看看,里面是不是多多少少都有了那么几款AI工具?就连今年的春晚也充满了浓浓的AI味道。

  现当下,对许多人来说,遇到需要解决的问题,可能不再是“百度”一下,而是问问AI;在出差途中,用手机给“龙虾”下个指令,整理一份需要的材料出来,甚至给“龙虾”设好闹钟,每天定时给自己“汇报”关注的最新动态……小到小学生,大到老年人,这些场景都成为越来越多人的生活日常了。

  你提的每一个问题,“龙虾”的每一次动作,就会有无数个词元在为你奔跑。

  数据为证:2024年初,中国日均词元调用量为1000亿,而到今年3月,日均词元调用量已超过140万亿,短短两年多时间,增长了超1000倍。

  3月30日,根据机构最新数据测算,上周全球AI大模型总调用量为22.7万亿词元,环比增长11.2%。其中,中国AI大模型的周调用量上升至9.86万亿词元,较此前一周上涨33.94%,连续四周实现对美国市场的超越。

  所以,最近火起来的“词元”,并不是新生事物,其实早就默默在背后给你支招、为你干活了。

(责编:鄢妮)