同学们，今天，我们来认识一个经常出现在AI里的新词——词元，也就是Token。

大家平时用AI聊天、写作业、生成文案时，后台都在悄悄处理一种叫“Token”的东西，它可以理解成AI读懂人类语言的最小单位。

我们看书是按字、词、句子来理解，而AI要先把一段话拆成一个个小片段，这些片段就是词元。它可能是一个字、一个词语，也可能是半个词、一个标点符号。

简单说，Token就像是AI的“口粮”。你发给AI的文字越长，它吃掉的Token就越多；AI回复你的内容，同样也要消耗Token。中文和英文的Token还不一样，英文多按单词算，中文一般几个字就算一个Token。

词元听起来很科技，其实就是人工智能和我们沟通的小桥梁。多了解一点AI知识，就能更好地拥抱智能时代。

（来源：豆包）