Tesla показала процесс обучения
Компания Tesla показала видео, в котором робот Optimus, работая полностью автономно, укладывает ячейки аккумуляторных батарей в ящик. Управляющий его движениями нейросетевой алгоритм выполняется в реальном времени на бортовом компьютере FSD. Нейросеть руководит движениями Optimus, используя в качестве входных данных только информацию с камер и тактильных сенсоров на руках робота. Optimus способен самостоятельно обнаруживать и исправлять ошибки — например, изменить положение неправильно уложенной в слот контейнера ячейки аккумулятора.
Также в видео показан процесс тренировки роботов. В большом помещении обучается одновременно множество роботов. Рядом с каждым из них находится инженер-оператор, который управляет действиями робота с помощью системы телеуправления, контролируя процесс через VR-гарнитуру. Использование большого количества роботов позволяет собирать необходимые для тренировки нейросетевой модели данные быстрее. Сейчас Optimus проходит испытания на одном из заводов Tesla. Другие разработчики роботов-гуманоидов также используют партнерства с автопроизводителями для испытаний. Например, компания Figure заключила соглашение с BMW, а Boston Dynamics — с Hyundai.
Чувствительная ступня определяет неровности и воздействующие на нее силы с помощью компьютерного зрения
Китайские инженеры разрботали для четвероногих роботов сенсорную стопу Foot Vision с прозрачной подошвой. С помощью встроенной камеры и алгоритмов компьютерного зрения Foot Vision может оценивать силу контакта с поверхностью, определять локальный наклон поверхности под каждой ногой, а также распознавать тип грунта и обнаруживать возможное проскальзывание ног. Статья опубликована в журнале IEEE Robotics and Automation Letters.