2018 年 Google 的研究团队开创性地提出了预训练语言模型 BERT[1],该模型在诸多自然语言 处理任务中展现了卓越的性能。这激发了大量以预训练语言模型为基础的自然语言处理研究,也 引领了自然语言处理领域的预训练范式的兴起。然而,尽管这一变革影响深远,但它并没有改变 每个模型只能解决特定问题的基本模式。2020 年,OpenAI 发布了 GPT-3 模型,其在文本生成任务 上的能力令人印...