Обучение с подкреплением помогло двухколесному роботу освоить сложные трюки
Инженеры из института RAI (бывший институт искусственного интеллекта Boston Dynamics) построили двухколесного робота UMV (Ultra Mobility Vehicle) на базе детского беговела (беспедальный велосипед) с 12-дюймовыми колесами. Двигается он за счет ременного привода на заднее колесо. Сверху располагается платформа с оборудованием, которая соединяется с рамой подвижным рычагом, напоминающим ногу. Большую часть времени нога находится в сложенном состоянии и платформа лежит на раме, однако при необходимости может резко распрямляться, толкая массивную платформу вверх, за счет чего робот прыгает. Прием продемонстрирован в видео, где UMV делает банни-хоп, запрыгивая на стол, высота которого сравнима с высотой самого робота. UMV может удерживать равновесие, стоя на одном месте, умеет ездить на заднем колесе и даже задом наперед. Все это робот делает без физической системы стабилизации благодаря системе управления на основе обучения с подкреплением, сообщает IEEE Spectrum.
Метод обучения с подкреплением помогает роботам осваивать навыки, которые крайне трудно реализовать, используя классические алгоритмы. Например, швейцарские инженеры применили его, чтобы научить четвероногого робота ANYmal с колесами на ногах подбирать коробку со стола и выбрасывать ее в контейнер, а также самостоятельно открывать запертую дверь, нажимая на поворотную ручку. Робот при этом балансирует, стоя на задней паре колес, а передние использует для манипуляций.
Он поднимает до 60 килограмм и укладывает груз на высоту более двух метров
Американская компания Dexterity объявила о создании мобильного двурукого робота Mech для выполнения погрузочно-разгрузочных работ в складских и производственных зонах. Робот выглядит как четырехколесная платформа с установленными сверху двумя промышленными манипуляторами, на концах которых находятся захваты с присосками. С их помощью робот может разгружать и паллетировать коробки, а также мягкие пакеты и упаковки. Размах полностью разведенных в стороны манипуляторов составляет 5,4 метра, максимальный поднимаемый груз — до 60 килограмм. Робот может поднимать объекты на высоту до 2,4 метров, а его габариты позволяют заезжать для работы прямо внутрь грузовых контейнеров и автоприцепов.