类似的对话生成模型包括GPT-3(Generative Pretrained Transformer-3)和DialoGPT。它们都是基于生成语言模型的,具有类似的优点和缺点。
GPT-3的全称叫生成预训练转换器-3 (Generative Pretrained Transformer-3)。 这是生成预训练转换器第三个系列,是2019年GPT-2的100多倍。
但GPT-3(Generative Pre-training Transformer-3)发布后,研究人员惊讶地发现,只需要输入一段prompt,即便在没有训练过的新任务上,模型也可以很好地完成。
但最近,研究人员出人意料地发现,这些模型中最大的一个,例如 GPT-3(生成式预训练 Transformer-3),只需提示即可很好地执行新任务。