Обучение с подкреплением помогло двухколесному роботу освоить сложные трюки
Инженеры из института RAI (бывший институт искусственного интеллекта Boston Dynamics) построили двухколесного робота UMV (Ultra Mobility Vehicle) на базе детского беговела (беспедальный велосипед) с 12-дюймовыми колесами. Двигается он за счет ременного привода на заднее колесо. Сверху располагается платформа с оборудованием, которая соединяется с рамой подвижным рычагом, напоминающим ногу. Большую часть времени нога находится в сложенном состоянии и платформа лежит на раме, однако при необходимости может резко распрямляться, толкая массивную платформу вверх, за счет чего робот прыгает. Прием продемонстрирован в видео, где UMV делает банни-хоп, запрыгивая на стол, высота которого сравнима с высотой самого робота. UMV может удерживать равновесие, стоя на одном месте, умеет ездить на заднем колесе и даже задом наперед. Все это робот делает без физической системы стабилизации благодаря системе управления на основе обучения с подкреплением, сообщает IEEE Spectrum.
Метод обучения с подкреплением помогает роботам осваивать навыки, которые крайне трудно реализовать, используя классические алгоритмы. Например, швейцарские инженеры применили его, чтобы научить четвероногого робота ANYmal с колесами на ногах подбирать коробку со стола и выбрасывать ее в контейнер, а также самостоятельно открывать запертую дверь, нажимая на поворотную ручку. Робот при этом балансирует, стоя на задней паре колес, а передние использует для манипуляций.
В Китае прошел турнир по боям между человекоподобными роботами
Компания EngineAI провела 16 июля в Шэньчжэне турнир по боям среди человекоподобных роботов под названием Ultimate Robot Knock-out Legend, сообщает издание Global Times. В соревнованиях участвовали тридцать две команды со всего мира. По правилам допускалось использовать только андроидов T800 — модель разработки EngineAI. В одном из боев из-за сильного удара и последующего падения у одного из андроидов оторвалась голова. Несмотря на потерю части сенсоров, робот продолжил поединок. EngineAI опубликовала компиляцию наиболее зрелищных моментов соревнования на своем YouTube-канале.