跳到索引

GLOSSARY

Token(词元)

AI 模型实际读取和生成的小文本块(约等于一个词或词的一部分);计费与上下文限制都以 token 计数。

模型读的不是字母或完整单词,而是 token——几个字符长的文本块。英文平均约 1.3 个 token 对应一个单词,其他语言和代码的切分方式各不相同,这也是质量和成本因语言而异的原因。

Token 在两个地方直接影响你:上下文窗口(模型一次能处理多少 token)和定价(API 按 token 计费)。“100 万 token 上下文”能装下整本书;而按 token 计费正是长对话和大文件更贵的原因。

相关术语

使用该技术的工具

相关分类