根据课程内容，大语言模型作为“下一个词预测器”的工作流程包括哪些关键步骤?()A. 接收输入文本并将其Token化B. 分析上下文关系，理解Token之间的语义联系C. 计算词表中每个可能词语的概率分布D. 根据概率分布选择最合适的词语输出

本题考查大语言模型作为“下一个词预测器”的核心工作流程。关键在于理解模型如何处理输入并生成预测。核心步骤包括输入处理、上下文分析、概率计算和结果选择。需注意模型处理文本的顺序和各步骤的逻辑关系。

选项分析

A 接收输入文本并Token化

模型首先需要将输入文本转换为计算单元（Token），如单词或子词单位，这是处理文本的基础步骤。

B 分析上下文关系

通过自注意力机制等技术，模型捕捉Token间的语义联系，理解上下文，这是预测的关键。

C 计算概率分布

模型基于上下文，为词表中的每个词语生成概率分布，确定预测的可能性。

D 选择输出词语

根据概率分布，模型选择最可能或最优的词语输出，完成预测。