题目
在大语言模型(LLM)的语境中,“标记(token)”一词指的是什么?A. 标记是文本的一个单元,如单词或子单词,模型会单独处理。B. 标记是分配给每个与语言模型交互的用户的唯一标识符。C. 标记是用于验证对语言模型的API请求的安全措施。D. 标记是给予为训练语言模型贡献有价值数据的用户的奖励。
在大语言模型(LLM)的语境中,“标记(token)”一词指的是什么?
A. 标记是文本的一个单元,如单词或子单词,模型会单独处理。
B. 标记是分配给每个与语言模型交互的用户的唯一标识符。
C. 标记是用于验证对语言模型的API请求的安全措施。
D. 标记是给予为训练语言模型贡献有价值数据的用户的奖励。
题目解答
答案
A. 标记是文本的一个单元,如单词或子单词,模型会单独处理。