stringtranslate.com

Илья Суцкевер

Илья Суцкевер FRS (родился 8 декабря 1986 года) — канадско-израильско-российский учёный-компьютерщик , специализирующийся на машинном обучении . [1]

Сутскевер внес несколько важных вкладов в область глубокого обучения . [7] [8] [9] Он является одним из создателей, совместно с Алексом Крижевским и Джеффри Хинтоном , AlexNet , сверточной нейронной сети . [10]

Суцкевер был соучредителем и бывшим главным научным сотрудником OpenAI . [11] В 2023 году он был одним из членов совета директоров OpenAI, уволивших генерального директора Сэма Альтмана ; Альтман вернулся через неделю, а Суцкевер вышел из состава совета директоров. В июне 2024 года Суцкевер стал соучредителем компании Safe Superintelligence вместе с Дэниелом Гроссом и Дэниелом Леви. [12] [13]

Ранняя жизнь и образование

Суцкевер родился в еврейской семье [14] в Нижнем Новгороде , Россия (тогда Горький, Советский Союз ). В возрасте 5 лет он совершил алию со своей семьей и жил в Иерусалиме , Израиль, [15] [16] до 16 лет, когда его семья переехала в Канаду. [17] Суцкевер учился в Открытом университете Израиля с 2000 по 2002 год. [18] После переезда в Канаду он учился в Университете Торонто в Онтарио . [18]

Сутскевер получил степень бакалавра наук по математике в Университете Торонто в 2005 году, [18] [19] [5] [20] степень магистра наук по информатике в 2007 году, [19] [21] и степень доктора философии по информатике в 2013 году. [3] [22] [23] Его научным руководителем был Джеффри Хинтон . [2]

В 2012 году Сутскевер построил AlexNet в сотрудничестве с Хинтоном и Алексом Крижевским . Чтобы удовлетворить вычислительные потребности AlexNet, он купил много графических процессоров GTX 580 онлайн. [24]

Карьера и исследования

Суцкевер (второй справа) в Стэнфордской высшей школе бизнеса в 2014 году.

В 2012 году Сутскевер провел около двух месяцев в качестве постдока у Эндрю Нга в Стэнфордском университете . Затем он вернулся в Университет Торонто и присоединился к новой исследовательской компании Хинтона DNNResearch, ответвлению исследовательской группы Хинтона. В 2013 году Google приобрела DNNResearch и наняла Сутскевера в качестве научного сотрудника в Google Brain . [25]

В Google Brain Сутскевер работал с Ориолом Виньялсом и Куоком Вьет Ле над созданием алгоритма обучения «последовательность-последовательность» [26] и работал над TensorFlow . [27] Он также является одним из многочисленных соавторов статьи AlphaGo . [28]

В конце 2015 года Суцкевер покинул Google, чтобы стать соучредителем и главным научным сотрудником недавно созданной организации OpenAI . [29] [30] [31]

Считается, что Суцкевер сыграл ключевую роль в разработке ChatGPT . [32] [33] В 2023 году он объявил, что будет соруководителем нового проекта OpenAI "Superalignment", который пытается решить проблему выравнивания сверхразумов в течение четырех лет. Он написал, что даже если сверхразум кажется далеким, он может произойти в этом десятилетии. [34]

Ранее Суцкевер был одним из шести членов совета директоров некоммерческой организации, которая контролирует OpenAI. [35] 17 ноября 2023 года совет директоров уволил Сэма Альтмана , заявив, что «он не был последовательно откровенен в своих коммуникациях с советом директоров». [36] The Information предположила, что решение было отчасти вызвано конфликтом по поводу того, в какой степени компания должна взять на себя обязательства по обеспечению безопасности ИИ . [37] На общем собрании компании вскоре после заседания совета директоров Суцкевер сказал, что увольнение Альтмана было «исполнением советом своего долга», [38] но на следующей неделе он выразил сожаление по поводу участия в увольнении Альтмана. [39] Увольнение Альтмана и отставка Брокмана привели к тому, что трое старших научных сотрудников ушли из OpenAI. [40] После этого Суцкевер вышел из состава совета директоров OpenAI. [41] После этого он отсутствовал в офисе OpenAI. Некоторые источники предположили, что он руководил командой удаленно, в то время как другие заявили, что у него больше не было доступа к работе команды. [42]

В мае 2024 года Суцкевер объявил о своем уходе из OpenAI, чтобы сосредоточиться на новом проекте, который был «очень лично значимым» для него. Его решение последовало за бурным периодом в OpenAI, отмеченным кризисами руководства и внутренними дебатами о направлении разработки ИИ и протоколов выравнивания . Ян Лейке , другой руководитель проекта супервыравнивания, объявил о своем уходе несколько часов спустя, сославшись на подрыв безопасности и доверия к руководству OpenAI. [43]

В июне 2024 года Суцкевер объявил о создании Safe Superintelligence Inc., новой компании, которую он основал вместе с Дэниелом Гроссом и Дэниелом Леви с офисами в Пало-Альто и Тель-Авиве . [44] В отличие от OpenAI, которая выпускает продукты, приносящие доход, Суцкевер заявил, что «первым продуктом новой компании станет безопасный суперинтеллект, и до тех пор она не будет заниматься ничем другим». [13] В сентябре 2024 года компания объявила, что привлекла 1 миллиард долларов от венчурных компаний, включая Andreessen Horowitz , Sequoia Capital , DST Global и SV Angel . [45]

В интервью в октябре 2024 года после получения Нобелевской премии по физике Джеффри Хинтон выразил поддержку решению Суцкевера уволить Альтмана, подчеркнув обеспокоенность по поводу безопасности ИИ. [46] [47]

Награды и почести

Ссылки

  1. ^ ab Публикации Ильи Суцкевера, проиндексированные Google Scholar
  2. ^ ab Илья Суцкевер в проекте «Генеалогия математики»
  3. ^ ab Sutskever, Ilya (2013). Training Recurrent Neural Networks. utoronto.ca (PhD диссертация). Университет Торонто. hdl :1807/36012. OCLC  889910425. ProQuest  1501655550. Архивировано из оригинала 26 марта 2023 г. Получено 24 марта 2023 г.
  4. ^ "Heard It Through the AI ​​| University of Toronto Magazine". University of Toronto Magazine . 28 сентября 2022 г. Архивировано из оригинала 29 мая 2023 г. Получено 9 октября 2022 г.
  5. ^ ab "Season 1 Ep. 22 Ilya Sutskever". Подкаст Robot Brains. 21 сентября 2021 г. Архивировано из оригинала 1 мая 2023 г. Получено 14 августа 2022 г. – через YouTube.
  6. ^ «Израильский соучредитель OpenAI уходит, поскольку США готовятся к ужесточению регулирования». Jewish News Syndicate . 17 мая 2024 г.
  7. ^ Крижевский, Алекс; Суцкевер, Илья; Хинтон, Джеффри Э. (2012). «Классификация ImageNet с глубокими сверточными нейронными сетями». Достижения в области нейронных систем обработки информации . 25. Curran Associates, Inc.
  8. ^ Шривастава, Нитиш; Хинтон, Джеффри; Крижевский, Алекс; Суцкевер, Илья; Салахутдинов, Руслан (2014). «Выпадение: простой способ предотвратить переобучение нейронных сетей». Журнал исследований машинного обучения . 15 (56): 1929–1958. ISSN  1533-7928.
  9. ^ Sutskever, Ilya; Vinyals, Oriol; Le, Quoc V. (8 декабря 2014 г.). «Последовательность обучения с помощью нейронных сетей». Труды 27-й Международной конференции по системам обработки нейронной информации — Том 2. NIPS'14. Кембридж, Массачусетс, США: MIT Press: 3104–3112. arXiv : 1409.3215 .
  10. ^ Алекс Крижевский ; Илья Суцкевер; Джеффри Э. Хинтон (24 мая 2017 г.). «Классификация ImageNet с глубокими сверточными нейронными сетями». Сообщения ACM . 60 (6): 84–90. doi :10.1145/3065386. ISSN  0001-0782. Wikidata  Q59445836.
  11. ^ Метц, Кейд (19 апреля 2018 г.). «Исследователи ИИ зарабатывают более 1 миллиона долларов, даже в некоммерческой организации». The New York Times . Архивировано из оригинала 1 марта 2023 г. Получено 22 октября 2018 г.
  12. ^ "Safe Superintelligence Inc". SSI . 19 июня 2024 . Получено 19 июня 2024 .
  13. ^ ab Vance, Ashlee (19 июня 2024 г.). «У Ильи Суцкевера есть новый план безопасного суперинтеллекта». Bloomberg Businessweek . Получено 19 июня 2024 г. .
  14. ^ Титкомб, Джеймс (16 мая 2024 г.). «Как гений ChatGPT, родившийся в России, решил свою судьбу после шокирующего переворота» . The Daily Telegraph . Получено 29 сентября 2024 г.
  15. ^ מן, יובל (18 ноября 2022 г.). ""הבינה המלאכותית מהמדע הבדיוני תהפוך למציאות"". Йнет (на иврите). Архивировано из оригинала 18 апреля 2023 года . Проверено 18 апреля 2023 г.
  16. ^ Вробель, Шарон (20 июня 2024 г.). «Соучредитель OpenAI создает новый стартап в области ИИ с исследовательской лабораторией в Тель-Авиве» . The Times of Israel . Получено 29 сентября 2024 г.
  17. ^ Ансари, Тасмия (7 марта 2023 г.). «Мозг, который прокачал ChatGPT, ImageNet и TF». Журнал Analytics India . Архивировано из оригинала 14 марта 2023 г. Получено 14 марта 2023 г.
  18. ^ abc "Нейронные сети". The Varsity . 25 октября 2010 г. Архивировано из оригинала 8 июня 2020 г. Получено 14 августа 2022 г.
  19. ^ ab Johnston, Jessica Leigh (8 декабря 2010 г.). «Нейронная сеть для нового тысячелетия». Журнал Университета Торонто . Архивировано из оригинала 14 апреля 2023 г. Получено 14 августа 2022 г.
  20. ^ Илья Суцкевер на LinkedIn
  21. ^ Sutskever, Ilya (2007). Nonlinear multilayered sequence models. utoronto.ca (диссертация на степень магистра наук). University of Toronto. hdl :1807/119676. OCLC  234120052. Архивировано из оригинала 24 марта 2023 г. Получено 24 марта 2023 г.
  22. ^ "RAM Workshop". thespermwhale.com . Архивировано из оригинала 5 декабря 2022 г. Получено 14 августа 2022 г.
  23. ^ "Эпизод 85: Разговор с Ильей Суцкевером". Голоса в ИИ . Gigaom. Архивировано из оригинала 22 марта 2023 года . Получено 14 августа 2022 года .
  24. ^ "Эксклюзив: Илья Суцкевер, главный научный сотрудник OpenAI, о своих надеждах и опасениях относительно будущего ИИ". MIT Technology Review . Архивировано из оригинала 1 ноября 2023 г. Получено 1 ноября 2023 г.
  25. ^ Макмиллан, Роберт (13 марта 2013 г.). «Google нанимает умы, которые помогли ускорить машинное обучение». wired.com . Архивировано из оригинала 16 июня 2018 г. . Получено 9 ноября 2019 г. .
  26. ^ ab Anon (2022). "Илья Суцкевер". royalsociety.org . Лондон: Королевское общество . Архивировано из оригинала 15 марта 2023 года . Получено 12 мая 2022 года .
  27. ^ Мартин Абади ; Ашиш Агарвал; Пол Бархэм; и др. (16 марта 2016 г.). TensorFlow: крупномасштабное машинное обучение в гетерогенных распределенных системах (PDF) . arXiv : 1603.04467 . Викиданные  Q29040034.
  28. ^ Дэвид Сильвер ; Аджа Хуан ; Крис Дж. Мэддисон; и др. (27 января 2016 г.). «Освоение игры в го с помощью глубоких нейронных сетей и поиска по дереву». Nature . 529 (7587): 484–489. doi :10.1038/NATURE16961. ISSN  1476-4687. PMID  26819042. Wikidata  Q28005460.
  29. ^ "OpenAI Blog". 12 декабря 2015 г. Архивировано из оригинала 6 октября 2021 г. Получено 17 июля 2016 г.
  30. ^ www.cs.toronto.edu/~ilya/
  31. ^ Метц, Кейд (27 апреля 2016 г.). «Внутри OpenAI, дикий план Илона Маска по освобождению искусственного интеллекта». wire.com . Архивировано из оригинала 27 апреля 2016 г. . Получено 9 ноября 2019 г. .
  32. ^ Ансари, Тасмия (7 марта 2023 г.). «Мозг, который прокачал ChatGPT, ImageNet и TF». AIM . Получено 17 мая 2024 г.
  33. ↑ Heaven, Will Douglas (2 мая 2023 г.). «Джеффри Хинтон рассказывает нам, почему он теперь боится технологий, которые он помог создать». MIT Technology Review . Получено 17 мая 2024 г.
  34. ^ "Introducing Superalignment". openai.com . Архивировано из оригинала 14 июля 2023 г. . Получено 14 июля 2023 г. .
  35. ^ "Наша структура". Архивировано из оригинала 29 июля 2023 г. . Получено 20 ноября 2023 г. OpenAI управляется советом OpenAI Nonprofit, в состав которого входят сотрудники OpenAI Global, LLC Грег Брокман (председатель и президент), Илья Суцкевер (главный научный сотрудник) и Сэм Альтман (генеральный директор), а также лица, не являющиеся сотрудниками: Адам Д'Анджело, Таша Макколи и Хелен Тонер.
  36. ^ Метц, Кейд (17 ноября 2023 г.). «Совет директоров OpenAI увольняет Сэма Альтмана, его высокопоставленного генерального директора» The New York Times .
  37. ^ "До того, как OpenAI выгнала Альтмана, сотрудники не соглашались с безопасностью ИИ". Информация . Архивировано из оригинала 18 ноября 2023 года . Получено 20 ноября 2023 года .
  38. ^ Эдвардс, Бендж (18 ноября 2023 г.). «Стали известны подробности неожиданного переворота в совете директоров, в результате которого был свергнут генеральный директор Сэм Альтман в OpenAI». Ars Technica . Архивировано из оригинала 19 ноября 2023 г. Получено 20 ноября 2023 г.
  39. ^ Розенберг, Скотт (20 ноября 2023 г.). «Суцкевер из OpenAI говорит, что сожалеет об увольнении Альтмана советом директоров». Axios . Получено 20 ноября 2023 г.
  40. ^ Томпсон, Полли. «3 старших научных сотрудника OpenAI ушли в отставку в связи с шокирующим увольнением Сэма Альтмана с поста генерального директора, говорится в отчете». Business Insider . Архивировано из оригинала 18 ноября 2023 г. Получено 18 ноября 2023 г.
  41. ^ «OpenAI объявляет о возвращении Сэма Альтмана на пост генерального директора». 22 ноября 2023 г.
  42. ^ Кан, Джереми (21 мая 2024 г.). «OpenAI обещала выделить 20% своей вычислительной мощности на борьбу с самым опасным видом ИИ, но так и не предоставила, говорят источники». Fortune . Получено 22 мая 2024 г.
  43. ^ Сэмюэл, Сигал (17 мая 2024 г.). ««Я потерял доверие»: почему команда OpenAI, отвечающая за защиту человечества, потерпела крах». Vox . Получено 18 мая 2024 г.
  44. ^ Табассум, Юверия (19 июня 2024 г.). «Бывший главный научный сотрудник OpenAI создаст новую компанию по разработке искусственного интеллекта». Reuters.
  45. ^ Кай, Кенрик; Ху, Кристал; Тонг, Анна (4 сентября 2024 г.). «Новый стартап SSI, ориентированный на безопасность в сфере искусственного интеллекта, созданный соучредителем OpenAI Суцкевером, привлекает 1 миллиард долларов» . Reuters.com . Проверено 4 сентября 2024 г.
  46. ^ Хетцнер, Кристиан. «Новый лауреат Нобелевской премии, крестный отец ИИ Джеффри Хинтон говорит, что гордится тем, что его ученик уволил босса OpenAI Сэма Альтмана». Fortune . Получено 12 октября 2024 г.
  47. ^ Тан, Кван Вэй Кевин. «Лауреат Нобелевской премии «крестный отец ИИ» говорит, что рад, что один из его учеников приложил руку к вытеснению Сэма Альтмана из OpenAI». Business Insider . Получено 12 октября 2024 г.
  48. ^ "35 инноваторов моложе 35: Илья Суцкевер". technologyreview.com . Архивировано из оригинала 4 мая 2019 . Получено 17 июля 2016 .
  49. ^ Мартин, Скотт (15 сентября 2018 г.). «Обучение с подкреплением «действительно работает» для ИИ против профессиональных геймеров, утверждает первопроходец OpenAI». Блог Nvidia . Nvidia. Архивировано из оригинала 28 марта 2023 г. . Получено 28 марта 2023 г. .
  50. ^ «Человек, который произвел революцию в области компьютерного зрения, машинного перевода, игр и робототехники · Конференция AI Frontiers». aifrontiers.com . Архивировано из оригинала 16 июня 2023 г. . Получено 16 июня 2023 г. .
В Викицитатнике есть цитаты, связанные с Ильей Суцкевером .