Token

模型读取和生成文本时使用的基本单位。

01

先用人话理解

Token 不一定等于一个字或一个单词。模型会把文本切成更适合计算的小片段,再把它们转换成数字表示。

02

为什么重要

输入长度、输出成本、上下文窗口和模型速度,最终都和 Token 数量直接相关。

试试搜索