Нейросеть научили играть в футбол

Одна из самых известных дочерних компаний Google, лондонская Deepmind, которая занимается разработками в сфере AI, научила нейросеть играть в командную игру - футбол.

Речь идет о таких навыках, как отбор, пас, а также умении управлять виртуальными игроками таким образом, чтобы действия в точности повторяли такие же в ральной игре в футбол. И самое главное - нейросеть освоила командное взаимодействие игровых агентов. В результате получилась симуляция с, на первый взгляд, немного неуклюжими виртуальными футболистами.

Вот как описали подход к обучению в Deepmind. Сначала нейросети дали полный контроль над виртуальными игроками, включая возможности движений суставов и естественной артикуляции - всего 56 степеней свободы, которые есть у настоящего человека.

AI учился управлять агентами-игроками в смоделированной среде с гравитацией и другими законами физики. Для обучения сеть копировала движения реальных футболистов, захваченные с помощью стандартных методов захвата движения, - бег, изменение направления, удары ногами и т. д. Затем тренировались навыки среднего уровня сложности, такие как ведение мяча, следование за ним и удар по мячу. Наконец, нейросеть практиковалась в командной игре 2 на 2.

Самым важным результатом стало то, что AI обучили различным тактикам игры. Нейросеть смогла играть в команде, успешно преодолевая разрыв между низкоуровневым моторным контролем и скоординированным целенаправленным поведением, говорят разработчики.

В 2013 году компания обучила AI играть в видеоигры, такие как Pong и Breakout.

Далее разработчики создали AlphaGo, которая достигла сверхчеловеческих уровней игры в древнекитайской Го.