Обучение с подкреплением помогло двухколесному роботу освоить сложные трюки
Инженеры из института RAI (бывший институт искусственного интеллекта Boston Dynamics) построили двухколесного робота UMV (Ultra Mobility Vehicle) на базе детского беговела (беспедальный велосипед) с 12-дюймовыми колесами. Двигается он за счет ременного привода на заднее колесо. Сверху располагается платформа с оборудованием, которая соединяется с рамой подвижным рычагом, напоминающим ногу. Большую часть времени нога находится в сложенном состоянии и платформа лежит на раме, однако при необходимости может резко распрямляться, толкая массивную платформу вверх, за счет чего робот прыгает. Прием продемонстрирован в видео, где UMV делает банни-хоп, запрыгивая на стол, высота которого сравнима с высотой самого робота. UMV может удерживать равновесие, стоя на одном месте, умеет ездить на заднем колесе и даже задом наперед. Все это робот делает без физической системы стабилизации благодаря системе управления на основе обучения с подкреплением, сообщает IEEE Spectrum.
Метод обучения с подкреплением помогает роботам осваивать навыки, которые крайне трудно реализовать, используя классические алгоритмы. Например, швейцарские инженеры применили его, чтобы научить четвероногого робота ANYmal с колесами на ногах подбирать коробку со стола и выбрасывать ее в контейнер, а также самостоятельно открывать запертую дверь, нажимая на поворотную ручку. Робот при этом балансирует, стоя на задней паре колес, а передние использует для манипуляций.
Он может регулировать свою высоту
Корейская компания XYZ разработала робота DEUX, предназначенного для работы в магазинах, офисах, больницах и жилых помещениях. Робот состоит из регулируемой по высоте центральной стойки, верхнего горизонтального цилиндрического модуля с камерой и анимированными глазами, на котором закреплены и две антропоморфные руки с трехпалыми захватами. Каждая рука способна поднимать груз массой до 5,5 килограмма, при этом масса самого робота — 60 килограмм. Передвигается он на колесной платформе и может изменять свою высоту в пределах от 90 до 155 сантиметров. В дополнение к роботу разработчики предлагают перчатку Glove X для телеуправления. Она передает движения руки человека-оператора роботу с задержкой менее 50 миллисекунд и собирает данные для обучения системы управления конкретным задачам. Стоимость версии DEUX с колесной платформой — 39,9 тысячи долларов США, сообщается на сайте разработчика.