Generative Pre – trained Transformer ，生成型预训练变换器。由 OpenAI 研发的大型文本生成类深度学习模型，可以用于对话 AI 、机器翻译、摘要生成、代码生成等复杂的自然语言处理任务
文章内容由AI百科使用AI进行创作，转载请注明出处：https://www.aipedia.cn/archives/4351.html
Transformer
上一篇
2023年7月7日
ChatGPT
下一篇
2023年7月7日
推荐词条
-
注意力机制
由于信息处理的瓶颈，人类会选择性地关注所有信息的一部分，同时忽略其他可见的信息，这种机制可以应用于人工智能的算法模型领域
-
约书亚·本吉奥 (Joshua Bengio)
约书亚·本吉奥是加拿大蒙特利尔大学计算机科学系教授，也是MILA实验室的主任。他是深度学习领域的知名专家，被誉为深度学习的三巨头之一。本吉奥在深度学习算法和模型方面做出了重要贡献，他的研究成果包括提出了深度置信网络（DBN）和生成对抗网络（GAN）等重要模型。他的工作推动了深度学习在自然语言处理、推荐系统等领域的应用。
-
乔治·霍普菲尔德 (Geoffrey Hinton)
乔治·霍普菲尔德是英国牛津大学计算机科学系教授，也是深度学习领域的知名专家。他的研究工作主要集中在神经网络和深度学习算法方面，他提出了著名的胶囊网络（Capsule Network）等重要模型。霍普菲尔德的贡献推动了深度学习在计算机视觉和自然语言处理等领域的应用和发展。
-
吉奥夫里·辛顿 (Geoffrey Hinton)
吉奥夫里·辛顿是加拿大多伦多大学计算机科学系教授，也是Google Brain团队的成员。他被誉为深度学习的教父，是深度学习领域的先驱之一。辛顿的研究工作主要集中在神经网络和深度学习算法方面，他提出了著名的反向传播算法，为深度学习的发展奠定了基础。他的贡献使得深度学习在计算机视觉、自然语言处理等领域取得了重大突破。
-
GAN
Generative Adversarial Networks ，生成对抗网络。通过一个生成器和一个判别器的相互对抗，来实现图像或文本等信息生成过程的算法模型
