词元
Token
也称Tokens / 分词单位
AI 读写内容时使用的小单位,常用来计算用量和收费
怎么理解
AI 会把一段文字拆成许多小片段再处理,每个片段叫一个词元。它可能是一个字、半个英文单词,也可能是标点。它不是固定的“一个字”。同一段话,用不同模型计算,词元数可能不同。
举个例子
你让 AI 读一份长报告,再写两百字摘要:读进去的报告会消耗输入词元,写出来的摘要会消耗输出词元。所以回答很短,也可能因为材料很长而产生较多用量。
补充说明
看到“支持十万词元”,可以先理解为一次能放入很多内容,不能直接换算成十万个中文字。具体能放多少,取决于文字内容和所用模型。