Стодолларовая перчатка переведет язык жестов в текст

Timothy F. O’Connor et al. / PLoS One, 2017
Инженеры из Калифорнийского университета в Сан-Диего разработали перчатку, которая распознает язык жестов и переводит его в цифровой текст. Перчатка может подключаться к смартфону или компьютеру по Bluetooth и передавать на них текст в режиме реального времени. Интересно, что суммарная стоимость компонентов устройства не превышает 100 долларов. В будущем авторы планируют также превратить перчатку в контроллер для виртуальной реальности. Работа, посвященная устройству, опубликована в журнале PLoS One, также о разработке сообщает издание Motherboard.
Количество глухих и слабослышащих людей, говорящих на жестовых языках, оценивается в десятки миллионов человек. Общение со слышащими людьми представляет для них большую проблему. Многие компании и исследователи пытаются облегчить это взаимодействие. К примеру, в 2015 году Яндекс выпустил специальное приложение для смартфонов. Некоторые разрабатывают более сложные системы, в том числе такие устройства для распознавания жестов, как представленное американскими инженерами.
Оно представляет собой специальную «умную» перчатку. На каждый палец перчатки, кроме большого, прикреплено по два пьезорезистивных датчика, которые меняют сопротивление при растяжении. Они присоединены к вычислительному модулю, в котором также находятся акселерометр и Bluetooth-передатчик.
Когда пользователь показывает жесты, сопротивление пьезорезистивных датчиков изменяется. Поскольку для каждой буквы жестового языка расположение пальцев уникально, компьютер считывает изменение напряжения с датчиков для каждой комбинации и понимает, какую букву показывает человек. Затем эта буква посылается через Bluetooth на смартфон или компьютер, где может быть использована по-разному, например для набора текста или перевода с американского жестового языка на другой.
Григорий Копиев