Представлена система для экспериментов с искусственным интеллектом в реальных играх и приложениях
Проект OpenAI, учрежденный рядом известных инвесторов (Илон Маск (Tesla, PayPal, SpaceX), Джессика Ливингстон (YCombinator), Питер Тиль (Clarium Capital), Рид Хоффман (LinkedIn), компании Amazon и Infosys) с целью развития общедоступных проектов в в области искусственного интеллекта, представил платформу Universe, предназначенную для оценки работы систем искусственного интеллекта и проведения тренировки систем машинного обучения в среде, построенной на основе реальных компьютерных игр и приложений. Код проекта написан на языке Python и распространяется под лицензией MIT.
По задумке разработчиков Universe упростит обкатку универсальных систем искусственного интеллекта, способных адаптироваться для разнообразных применений и не завязанных на решении каких-то узкоспециализированных задач. В отличие от вчера представленного проекта DeepMind Lab, платформа Universe не ограничивается игровыми приложениями и предлагает более высокий уровень абстракции, симулирующий работу за компьютером. Интеллектуальные агенты получают доступ к содержимому экрана через VNC на уровне пиксельного изображения и могут контролировать ввод через симуляцию нажатия клавиш на клавиатуре и движения мыши.
Помимо предоставления агентам возможности активных действий в различных приложениях система также может применяться как окружение для тренировки систем машинного обучения. В процессе работы агента человек может подключиться к сеансу для отслеживания активности интеллектуального агента и корректировки его действий. Подготовка окружения сводится к запуску приложения в специально подготовленном контейнере на базе системы Docker и подключения интеллектуального агента при помощи написания интерфейсного скрипта на языке Python.
Ранее проект OpenAI подготовил инструментарий Gym, позволяющий создавать и сравнивать алгоритмы обучения с подкреплением. Universe позволяет упростить создание окружений для выполнения подобных алгоритмов и дает возможность организовать их взаимодействие с программой без индивидуальной адаптации приложений за счет предоставления универсального интерфейса для взаимодействия с программами на уровне трансляции вывода экрана и симуляции устройств ввода.
Первый выпуск Universe предоставляет около тысячи окружений, среди которых разнообразные Flash-игры, браузерные задачи и игры подобные slither.io и GTA V. Сотни из окружений пригодны для проведения обучения с подкреплением и почти все могут использоваться для оценки работы таких алгоритмов. Об участии в подготовке окружений на базе платформы Universe уже объявили компании EA, Valve, Microsoft, NVIDIA и несколько десятков производителей компьютерных игр.
Microsoft NVIDIA SpaceX Tesla Илон Маск
