Эндрю Г. Барто (родился около 1948 года) — американский учёный-компьютерщик , в настоящее время почётный профессор компьютерных наук в Массачусетском университете в Амхерсте . Барто наиболее известен своим основополагающим вкладом в область современного вычислительного обучения с подкреплением . [1]
Барто получил степень бакалавра с отличием по математике в Мичиганском университете в 1970 году, после того как изначально специализировался на военно-морской архитектуре и инженерии. После прочтения работ Майкла Арбиба и Маккалока и Питтса он заинтересовался использованием компьютеров и математики для моделирования мозга, и пять лет спустя получил степень доктора философии по информатике за диссертацию о клеточных автоматах . [2]
В 1977 году Барто присоединился к Колледжу информации и компьютерных наук Массачусетского университета в Амхерсте в качестве научного сотрудника, получившего докторскую степень, в 1982 году он был повышен до должности доцента, а в 1991 году — доцента. Он был заведующим кафедрой с 2007 по 2011 год и основным преподавателем программы нейронауки и поведения. [3]
В это время в UMass Барто был одним из руководителей Лаборатории автономного обучения (первоначально Лаборатории адаптивных сетей), которая сгенерировала несколько ключевых идей в обучении с подкреплением. Ричард Саттон , с которым он стал соавтором влиятельной книги Reinforcement Learning: An Introduction (MIT Press 1998; 2-е издание 2018), был его первым аспирантом. Барто выпустил 27 аспирантов, тринадцать из которых стали профессорами. [3]
Барто опубликовал более ста статей или глав в журналах, книгах, трудах конференций и семинаров. Он является соавтором книги Reinforcement Learning: An Introduction (Обучение с подкреплением: введение) , MIT Press 1998 (2-е издание 2018), и соредактором Handbook of Learning and Approximate Dynamic Programming (Справочник по обучению и приближенному динамическому программированию) , Wiley-IEEE Press, 2004. [4]
Барто является членом Американской ассоциации содействия развитию науки , членом и старшим членом IEEE [5] , а также членом Американской ассоциации искусственного интеллекта и Общества нейронауки .
Барто был удостоен премии UMass Neurosciences Lifetime Achievement Award (2019), премии IEEE Neural Network Society Pioneer Award (2004) [6] и премии IJCAI Award for Research Excellence (2017). Его цитата для последней премии гласила:
Профессор Барто получил признание за свои новаторские и значимые исследования как в теории, так и в применении обучения с подкреплением. [1]