Стодолларовая перчатка переведет язык жестов в текст

Инженеры из Калифорнийского университета в Сан-Диего разработали перчатку, которая распознает язык жестов и переводит его в цифровой текст. Перчатка может подключаться к смартфону или компьютеру по Bluetooth и передавать на них текст в режиме реального времени. Интересно, что суммарная стоимость компонентов устройства не превышает 100 долларов. В будущем авторы планируют также превратить перчатку в контроллер для виртуальной реальности. Работа, посвященная устройству, опубликована в журнале PLoS One, также о разработке сообщает издание Motherboard.

Количество глухих и слабослышащих людей, говорящих на жестовых языках, оценивается в десятки миллионов человек. Общение со слышащими людьми представляет для них большую проблему. Многие компании и исследователи пытаются облегчить это взаимодействие. К примеру, в 2015 году Яндекс выпустил специальное приложение для смартфонов. Некоторые разрабатывают более сложные системы, в том числе такие устройства для распознавания жестов, как представленное американскими инженерами.

Оно представляет собой специальную «умную» перчатку. На каждый палец перчатки, кроме большого, прикреплено по два пьезорезистивных датчика, которые меняют сопротивление при растяжении. Они присоединены к вычислительному модулю, в котором также находятся акселерометр и Bluetooth-передатчик.

Когда пользователь показывает жесты, сопротивление пьезорезистивных датчиков изменяется. Поскольку для каждой буквы жестового языка расположение пальцев уникально, компьютер считывает изменение напряжения с датчиков для каждой комбинации и понимает, какую букву показывает человек. Затем эта буква посылается через Bluetooth на смартфон или компьютер, где может быть использована по-разному, например для набора текста или перевода с американского жестового языка на другой.

Разработчики провели комплексные испытания перчатки и убедились, что датчики успешно распознают жесты даже после тысячи полных сгибаний пальцев. Несмотря на то, что это не первое подобное устройство, создатели отмечают, что его себестоимость не превышает ста долларов США. В будущем они планируют также создать на основе этого устройства контроллер для виртуальной реальности или дронов.В 2015 году британский дизайнер представила аналогичное устройство. Оно также позволяло конвертировать язык жестов в цифровой текст, но было оснащено меньшим количеством датчиков, а также не было настолько доступным. О том, как развивались жестовые языки, и об их особенностях можно узнать в нашем материале «Понятно без слов».

Григорий Копиев