イリヤ・サツケバー (Ilya Sutskever, 1986年12月8日 - ) は、機械学習を専門とするコンピューター科学者 (英語版 ) である[ 7] 。
サツケバーは、深層学習 の分野において、いくつかの主要な貢献を果たしてきた[ 8] [ 9] [ 10] 。特に、アレックス・クリジェフスキー (英語版 ) およびジェフリー・ヒントン と共に、畳み込みニューラルネットワーク であるAlexNet の共同発明者である[ 11] 。
なお、日本語ではイリア・スツケヴァー とも表記される[ 12] 。
解説
サツケバーは、OpenAI の共同設立者であり、以前は同社のチーフサイエンティストを務めていた[ 13] 。2023年に起きたサム・アルトマン解任騒動 において、サツケバーはCEOのサム・アルトマン を解任したOpenAIの取締役会のメンバーの一人であった。アルトマンは1週間後に復帰し、サツケバーは取締役会を辞任した。2024年6月、サツケバーは、ダニエル・グロス (英語版 ) およびダニエル・レヴィ[ 14] と共に、Safe Superintelligence社を共同設立した[ 15] [ 16] 。
幼少期と教育
サツケバーは、当時ソビエト連邦の一部であったロシア のニジニ・ノヴゴロド (当時はゴーリキーと呼ばれていた)で生まれ、5歳の時に家族と共にイスラエル に移住し[ 17] 、15歳までそこで暮らした[ 18] 。
サツケバーは、2000年から2002年までイスラエル・オープン大学 に通った[ 19] 。その後、16歳のときに家族と共にカナダ に移住し、オンタリオ州 のトロント大学 に通った。
サツケバーは、2005年にトロント大学で数学の理学士号を[ 19] [ 20] 、2007年にコンピュータサイエンスの理学修士号を[ 20] [ 21] 、そして2013年にコンピュータサイエンス の博士号を取得した[ 6] [ 22] [ 23] 。彼の博士課程の指導教官は、ジェフリー・ヒントンであった[ 24] 。
2012年、サツケバーは、ヒントンおよびアレックス・クリジェフスキーと共同でAlexNetを構築した。AlexNetの計算需要を満たすために、彼はオンラインで多くのGTX 580 (英語版 ) GPU を購入した[ 25] 。
経歴と研究
2012年、サツケバーはスタンフォード大学 のアンドリュー・ン のもとで約2か月間ポスドク として過ごした。その後、トロント大学に戻り、ヒントンの研究グループからスピンオフ したヒントンの新しい研究会社DNNResearchに参加した。2013年、Google はDNNResearchを買収し、サツケバーをGoogle Brain (英語版 ) の研究員として雇用した[ 26] 。
Google Brainでは、サツケバーはオリオール・ビニャルス (英語版 ) およびクォック・ヴィエット・レ (英語版 ) と協力してsequence-to-sequence 学習アルゴリズムを作成し[ 27] 、TensorFlow の開発にも携わった[ 28] 。彼はまた、AlphaGo の論文の多くの共著者の一人でもある[ 29] 。
2015年末、サツケバーはGoogleを去り、新たに設立された組織OpenAI の共同設立者兼チーフサイエンティストとなった[ 30] [ 31] [ 32] 。
サツケバーは、ChatGPT の開発において重要な役割を果たしたと考えられている[ 33] [ 34] 。2023年、彼はOpenAIの新しい「Superalignment」プロジェクトを共同で主導すると発表した。このプロジェクトは、4年以内に超知能 のAIアライメント 問題を解決しようとしている。サツケバーは、超知能がまだ遠い先のことのように思えても、この10年で実現する可能性があると述べている[ 35] 。
サツケバーは以前、OpenAIを統括する非営利団体の6人の取締役の一人であった[ 36] 。The information (英語版 ) は、サム・アルトマンの解任は、同社がAIの安全性にどの程度コミットすべきかについての対立が原因の一部であると推測した[ 37] 。取締役会直後の全社集会で、サツケバーはアルトマンの解任は「取締役会が義務を果たしたこと」であると述べたが[ 38] 、翌週にはアルトマンの解任に関与したことを後悔していると表明した[ 39] 。アルトマンの解任とグレッグ・ブロックマン の辞任により、3人の上級研究者 がOpenAIを辞任した[ 40] 。その後、サツケバーはOpenAIの取締役会を辞任した[ 41] 。その後、彼はOpenAIのオフィスから姿を消した。一部の情報筋は、彼がチームをリモートで率いていると示唆したが、他の情報筋は、彼がもはやチームの仕事にアクセスできず、チームを率いることはできないと述べた[ 42] 。
2024年5月、サツケバーは、彼にとって「非常に個人的な意味を持つ」新しいプロジェクトに集中するために、OpenAIからの離脱を発表した。彼の決断は、リーダーシップの危機と、AI開発の方向性と調整プロトコルに関する内部論争によって特徴付けられた、OpenAIの激動の時期に続いた。超調整プロジェクトのもう一人のリーダーであるヤン・ライク (英語版 ) は、数時間後にOpenAIのリーダーシップにおける安全性と信頼の低下を理由に離脱を発表した[ 43] 。
2024年6月、サツケバーは、ダニエル・グロスとダニエル・レヴィと共に設立した新しい会社、Safe Superintelligence Inc.を発表した。同社はパロアルト とテルアビブ にオフィスを構えている[ 44] 。収益を生み出す製品をリリースするOpenAIとは対照的に、サツケバーは、新会社に関して「最初の製品は安全な超知能であり、それまでは他のことは何もしない」と述べた[ 45] 。
2024年9月、同社はAndreessen Horowitz 、Sequoia Capital 、DST Global (英語版 ) 、SV Angel (英語版 ) などのベンチャーキャピタルから10億ドルを調達したことを発表した[ 46] 。
受賞・講演等
2015年、MITテクノロジーレビューの35 Innovators Under 35に選出[ 47] 。
2018年、Nvidia Ntech 2018[ 48] およびAI Frontiers Conference 2018[ 49] での基調講演。
2022年、英国王立協会のフェロー(FRS)に選出[ 50] 。
脚注
^ “Ilya Sutskever ”. technologyreview.com (18 August 2015). 15 May 2023時点のオリジナルよりアーカイブ 。14 August 2022 閲覧。
^ “Heard It Through the AI | University of Toronto Magazine ” (英語). University of Toronto Magazine (28 September 2022). 29 May 2023時点のオリジナルよりアーカイブ 。9 October 2022 閲覧。
^ “Season 1 Ep. 22 Ilya Sutskever ”. The Robot Brains Podcast (21 September 2021). 1 May 2023時点のオリジナルよりアーカイブ 。14 August 2022 閲覧。
^ イリヤ・サツケバーの出版物 - Google Scholar
^ イリヤ・サツケバー - Mathematics Genealogy Project
^ a b Sutskever, Ilya (2013). Training Recurrent Neural Networks . utoronto.ca (PhD thesis) (英語). University of Toronto. hdl :1807/36012 . OCLC 889910425 . 2023年3月26日時点のオリジナルよりアーカイブ 。2023年3月24日閲覧 。
^ “Ilya Sutskever ”. scholar.google.com . 2024年8月27日 閲覧。
^ Krizhevsky, Alex; Sutskever, Ilya; Hinton, Geoffrey E (2012). “ImageNet Classification with Deep Convolutional Neural Networks” . Advances in Neural Information Processing Systems (Curran Associates, Inc.) 25 . https://proceedings.neurips.cc/paper/2012/hash/c399862d3b9d6b76c8436e924a68c45b-Abstract.html .
^ Srivastava, Nitish; Hinton, Geoffrey; Krizhevsky, Alex; Sutskever, Ilya; Salakhutdinov, Ruslan (2014). “Dropout: A Simple Way to Prevent Neural Networks from Overfitting” . Journal of Machine Learning Research 15 (56): 1929–1958. ISSN 1533-7928 . http://jmlr.org/papers/v15/srivastava14a.html .
^ Sutskever, Ilya; Vinyals, Oriol; Le, Quoc V. (2014-12-08). “Sequence to sequence learning with neural networks” . Proceedings of the 27th International Conference on Neural Information Processing Systems - Volume 2 . NIPS'14 (Cambridge, MA, USA: MIT Press): 3104–3112. arXiv :1409.3215 . https://dl.acm.org/doi/10.5555/2969033.2969173 .
^ Krizhevsky, Alex; Sutskever, Ilya; Hinton, Geoffrey E. (2017-05-24). “ImageNet classification with deep convolutional neural networks” . Commun. ACM 60 (6): 84–90. doi :10.1145/3065386 . ISSN 0001-0782 . https://dl.acm.org/doi/10.1145/3065386 .
^ 小林雅一『イーロン・マスクを超える男サム・アルトマン : なぜ、わずか7年で奇跡の対話型AIを開発できたのか』朝日新聞出版、2024年、33頁。ISBN 978-4-02-251993-1 。
^ Metz, Cade (19 April 2018). “A.I. Researchers Are Making More Than $1 Million, Even at a Nonprofit” (英語). The New York Times . オリジナル の1 March 2023時点におけるアーカイブ。. https://web.archive.org/web/20230301021221/https://www.nytimes.com/2018/04/19/technology/artificial-intelligence-salaries-openai.html?action=click&module=RelatedCoverage&pgtype=Article®ion=Footer 22 October 2018 閲覧。
^ “Daniel Levy ”. X. 2024年8月28日 閲覧。
^ “Safe Superintelligence Inc. ”. SSI (19 June 2024). 19 June 2024 閲覧。
^ “Ilya Sutskever Has a New Plan for Safe Superintelligence ”. Bloomberg Businessweek (19 June 2024). 19 June 2024 閲覧。
^ מן, יובל (2022年11月18日). “"הבינה המלאכותית מהמדע הבדיוני תהפוך למציאות"” (ヘブライ語). Ynet . オリジナル の18 April 2023時点におけるアーカイブ。. https://web.archive.org/web/20230418113604/https://www.ynet.co.il/digital/technology/article/h1ebvhxuj 2023年4月18日 閲覧。
^ Ansari, Tasmia (2023年3月7日). “The Brain That Supercharged ChatGPT, ImageNet and TF ” (英語). Analytics India Magazine . 14 March 2023時点のオリジナルよりアーカイブ 。2023年3月14日 閲覧。
^ a b “Neural networking ”. The Varsity (25 October 2010). 8 June 2020時点のオリジナルよりアーカイブ 。14 August 2022 閲覧。
^ a b “A Neural Network for a New Millennium ”. University of Toronto Magazine (8 December 2010). 14 April 2023時点のオリジナルよりアーカイブ 。14 August 2022 閲覧。
^ Sutskever, Ilya (2007). Nonlinear multilayered sequence models . utoronto.ca (MSc thesis) (英語). University of Toronto. hdl :1807/119676 . OCLC 234120052 . 2023年3月24日時点のオリジナルよりアーカイブ 。2023年3月24日閲覧 。
^ “RAM Workshop ”. thespermwhale.com . 5 December 2022時点のオリジナル よりアーカイブ。14 August 2022 閲覧。
^ “Episode 85: A Conversation with Ilya Sutskever ”. Voices in AI . Gigaom. 22 March 2023時点のオリジナルよりアーカイブ 。14 August 2022 閲覧。
^ “Ilya Sutskever - The Mathematics Genealogy Project ”. mathgenealogy.org . 2024年8月27日 閲覧。
^ “Exclusive: Ilya Sutskever, OpenAI's chief scientist, on his hopes and fears for the future of AI ” (英語). MIT Technology Review . 1 November 2023時点のオリジナルよりアーカイブ 。2023年11月1日 閲覧。
^ McMillan, Robert (13 March 2013). “Google Hires Brains that Helped Supercharge Machine Learning ”. wired.com . 16 June 2018時点のオリジナルよりアーカイブ 。9 November 2019 閲覧。
^ Anon (2022年). “Ilya Sutskever ”. royalsociety.org . London: Royal Society . 15 March 2023時点のオリジナルよりアーカイブ 。12 May 2022 閲覧。
^ Abadi, Martín (2016年3月14日). “TensorFlow: Large-Scale Machine Learning on Heterogeneous Distributed Systems ” (英語). arXiv.org . 2024年8月27日 閲覧。
^ Silver, David; Huang, Aja; Maddison, Chris J.; Guez, Arthur; Sifre, Laurent; van den Driessche, George; Schrittwieser, Julian; Antonoglou, Ioannis et al. (2016-01). “Mastering the game of Go with deep neural networks and tree search” (英語). Nature 529 (7587): 484–489. doi :10.1038/nature16961 . ISSN 1476-4687 . https://www.nature.com/articles/nature16961 .
^ “OpenAI Blog ” (12 December 2015). 6 October 2021時点のオリジナル よりアーカイブ。17 July 2016 閲覧。
^ “Ilya Sutskever's home page ”. www.cs.toronto.edu . 2024年8月27日 閲覧。
^ Metz, Cade (27 April 2016). “Inside OpenAI, Elon Musk's Wild Plan to Set Artificial Intelligence Free ”. wire.com . 27 April 2016時点のオリジナルよりアーカイブ 。9 November 2019 閲覧。
^ Ansari, Tasmia (2023年3月7日). “The Brain That Supercharged ChatGPT, ImageNet and TF ” (英語). AIM . 2024年5月17日 閲覧。
^ Heaven, Will Douglas (May 2, 2023). “Geoffrey Hinton tells us why he's now scared of the tech he helped build ” (英語). MIT Technology Review . 2024年5月17日 閲覧。
^ “Introducing Superalignment ” (英語). openai.com . 14 July 2023時点のオリジナルよりアーカイブ 。2023年7月14日 閲覧。
^ “Our structure ”. 29 July 2023時点のオリジナルよりアーカイブ 。2023年11月20日 閲覧。 “OpenAI is governed by the board of the OpenAI Nonprofit, composed of OpenAI Global, LLC employees Greg Brockman (Chairman & President), Ilya Sutskever (Chief Scientist), and Sam Altman (CEO), and non-employees Adam D’Angelo, Tasha McCauley, Helen Toner.”
^ “Before OpenAI Ousted Altman, Employees Disagreed Over AI 'Safety' ”. The Information . 18 November 2023時点のオリジナルよりアーカイブ 。2023年11月20日 閲覧。
^ “Details emerge of surprise board coup that ousted CEO Sam Altman at OpenAI ”. Ars Technica (2023年11月18日). 19 November 2023時点のオリジナルよりアーカイブ 。2023年11月20日 閲覧。
^ Rosenberg, Scott (2023年11月20日). “OpenAI's Sutskever says he regrets board's firing of Altman” . Axios . https://www.axios.com/2023/11/20/sam-altman-fired-openai-board-illya-sutsever-regrets 2023年11月20日 閲覧。
^ Thompson, Polly. “3 senior OpenAI researchers resign in the wake of Sam Altman's shock dismissal as CEO, report says ” (英語). Business Insider . 18 November 2023時点のオリジナルよりアーカイブ 。2023年11月18日 閲覧。
^ “OpenAI announces return of Sam Altman as CEO. ” (22 November 2023). 2024年8月28日 閲覧。
^ Kahn, Jeremy (May 21, 2024). “OpenAI promised 20% of its computing power to combat the most dangerous kind of AI—but never delivered, sources say ” (英語). Fortune . 2024年5月22日 閲覧。
^ Samuel, Sigal (2024年5月17日). “"I lost trust": Why the OpenAI team in charge of safeguarding humanity imploded ” (英語). Vox . 2024年5月18日 閲覧。
^ Tabassum, Juveria (June 19, 2024). “Former OpenAI chief scientist to start a new AI company” . Reuters. https://www.reuters.com/technology/artificial-intelligence/former-openai-chief-scientist-start-new-ai-company-2024-06-19/
^ “Ilya Sutskever Has a New Plan for Safe Superintelligence ”. Bloomberg Businessweek (19 June 2024). 19 June 2024 閲覧。
^ “OpenAI co-founder Sutskever's new safety-focused AI startup SSI raises $1 billion ”. reuters.com (4 September 2024). 4 September 2024 閲覧。
^ “35 Innovators Under 35: Ilya Sutskever ”. technologyreview.com . 4 May 2019時点のオリジナルよりアーカイブ 。17 July 2016 閲覧。
^ “Reinforcement Learning 'Really Works' for AI Against Pro Gamers, OpenAI Trailblazer Says ”. Nvidia Blog . Nvidia (15 September 2018). 28 March 2023時点のオリジナルよりアーカイブ 。28 March 2023 閲覧。
^ “The man who revolutionized computer vision, machine translation, games and robotics · AI Frontiers Conference ”. aifrontiers.com . 16 June 2023時点のオリジナルよりアーカイブ 。2023年6月16日 閲覧。
^ Anon (2022年). “Ilya Sutskever ”. royalsociety.org . London: Royal Society . 15 March 2023時点のオリジナルよりアーカイブ 。12 May 2022 閲覧。