# why # what - 1985 or 1985 出生于苏联 - 2003 年在多伦多大学,师从[[Geoffrey Hinton 辛顿]] - 2012 年,与Alex Krizhevsky和Geoffrey Hinton共同发明了一种卷积神经网络[[AlexNet]]获得了冠军,颠覆了业内对神经网络的看法 - 2012 年毕业后,在斯坦福大学与[[吴恩达]]经历了 2 个月的博士后生涯,随后加入 Hinton 新公司DNNResearch,公司被 google 收购后,ilya 成为 google brain 科学家 - 2015 年,加入 OpenAI - 2023 年宣布新项目[[超级对齐]]:在2023年,他宣布将共同领导OpenAI的新项目"超级对齐",该项目试图在4年内解决超级智能的对齐问题。他写道,即使超级智能看起来还很遥远,但它可能在这个十年内发生。 - 在他的领导下,推出了GPT系列早期版本、DALL·E系列、代码大模型Codex,直到ChatGPT,再次改变世界。 - 2024 年离开 OpenAI # how - 2010 年 ilya 就用 GPU 开发了一种语言模型 - [[规模法则 scaling laws]]是 ilya 一开始就有的直觉 - ilya 和 Hinton 都认为语言模型不只是预测下一个 token - ilya 和 Hinton 都认同[[预测即压缩压缩即智能,智能即具备理解力]] # how good # Ref. - [ilya-wikipedia](https://readwise.io/reader/shared/01hfjfch03tapbmqm1geczqckd) - [Hinton揭秘Ilya成长历程:Scaling Law是他学生时代就有的直觉](https://readwise.io/reader/shared/01jbzxw2rdx5jb0n8jqsav5hfm)