Робот научился ходить, не сделав ни одного шага
Команда ученых обучила роботизированный механизм прямохождению. В работе использовалась методика с подкреплением, а устройство способно передвигаться не только в симуляции, но и в реальном мире.
Сегодня лидером на рынке роботов считается Boston Dynamics. Специалисты утверждают, что на самом деле созданные инженерами компании машины ходят благодаря программному коду, а также тщательной настройке. В отличие от них, команда исследователи из Беркли использовала обучение с подкреплением, что позволило добиться куда более внушительных результатов.
Одна из проблем, стоящих на пути подобной методики, кроется в различиях между реальным и виртуальным миром, ведь вначале ИИ обучается в компьютерной симуляции. Ну а при попытке освоить хождение в привычных для человека условиях большинство роботов оказывается не способно передвигаться. Для решения проблемы использовалось сразу два алгоритма: MuJoCo, задействованный на ранних этапах обучения, и Matlab SimMechanics, более соответствующий реальным условиям. В итоге робот смог начать ходить сразу же, как только его роботизированные ноги впервые коснулись земли.
Результат превзошел самые смелые ожидания, ведь даже после выхода из строя двух двигателей на колене робот самостоятельно научился координировать свои движения. Исследователи полагают, что такой способ позволит улучшить возможности машин, научив их передвигаться по пересеченной местности.
