Token：AI运行的燃料

Token科普Token：AI运行的燃料最近，国家数据局为Token定了官方中文名——“词元”。数据显示，我国每日Token调用量已超140万亿！抛开数字，Token究竟是什么？你要明白，AI无法理解人类的日常语言。当你输入一句指令，AI会像切菜般将它拆解成一个个标准化的“小单元”，这些单元就是Token。在中文中，一个汉字通常对应1到2个Token。也就是说，AI不是读“字”，而是吞“Token”。在AI系统中，Token承担两大核心功能。一是“内存容量”。AI的处理能力有限，若输入过长，它会“遗忘”内