【Transformer论文作者之一Noam Shazeer宣布离开Google,加入OpenAI】
6 月 18 日,Google DeepMind 工程副总裁、#Gemini# 模型联合负责人 Noam Shazeer 宣布,他将离开 Google,加入 OpenAI。
帖文措辞客气,称这是一个“艰难的决定”,并表示自己对 Google 团队“无比自豪”。据报道,#OpenAI# 同日也向内部员工通报了这一消息。
Shazeer 可以说是 AI 领域最具符号意义的技术人物之一。2017 年,他作为共同作者之一发表论文《Attention Is All You Need》,提出 Transformer 架构。这篇论文至今被引用超过 25 万次,是 21 世纪最具影响力的计算机科学论文之一,也奠定了当下大模型技术的共同架构起点。
除了 Transformer,Shazeer 还是稀疏混合专家模型(Sparsely-gated Mixture of Experts,MoE)的先驱,也是 T5、Switch Transformer 等关键工作的核心作者。今天各家实验室广泛采用的 MoE 架构思路,相当一部分可以追溯到他的研究。2023 年,《时代》杂志将他评为全球 AI 领域最具影响力的 100 人之一。
戳链接查看详情:http://t.cn/AXaEoYgq
