Исследователи из Microsoft Research представили технологию ввода для тачскринов, которая кроме непосредственных нажатий на экран также учитывает характер захвата устройства и нависание пальцев над какой-либо областью экрана. Авторы представят подробный доклад на конференции ACM CHI 2016, кратко о технологии рассказывается в блоге Microsoft.
Технология Pre-Touch Sensing предназначена в первую очередь для мобильных устройств и не требует аппаратной доработки гаджета. Авторы разработки предлагают использовать для управления смартфоном использовать не только нажатия и показания датчиков, но также и информацию о хвате кисти, удерживающей смартфон, и информацию о «нависающих» над экраном жестах без касания. Такой подход позволяет точнее предсказывать действие, которое намерн выполнить пользователь, отмечают исследователи.
В опубликованном видео разработчики демонстрируют применение технологии для выдачи удобного пользователю интерфейса. Например, медиаплеер, который по умолчанию не выводит никаких элементов интерфейса на экран. Программа отображает меню только при приближении пальцев к экрану, при этом учитывает хват и может выводить полноценное меню посередине или урезанную версию для одного пальца, если пользователь держит гаджет одной рукой.
Как отмечает The Verge, технология выглядит более удобной и практически применимой, чем Apple 3D Touch и похожие разработки «нависающих» жестов у Sony и Samsung. О возможном внедрении технологии Pre-Touch Sensing в серийные смартфоны ничего не сообщается.
Это не первая разработка Microsoft Research, посвященная расширению функциональности серийных смартфонов без аппаратных доработок. Ранее специалисты из Microsoft Research разработали метод 3D-сканирования с использованием в качестве платформы обычного смартфона без каких-либо аппаратных модификаций.
Сканер работает в паре со смартфоном
Канадские и мексиканские исследователи представили результаты пилотных клинических испытаний сканера для диагностики воспаления и инфекционного процесса в ранах. Устройство гиперспектральной визуализации, выполненное в виде сменного объектива для смартфона, анализирует изображение, термограмму и флуоресценцию пораженной области. В испытаниях гаджет продемонстрировал общую точность в 74 процента. Отчет о работе опубликован в журнале Frontiers in Medicine. Хронические раны, которые не заживают в течение 8–12 недель, представляют серьезную проблему для общественного здравоохранения. Типичным пусковым фактором для их развития служит инфекция, особенно в том случае, если процесс заживления в силу состояния самой раны и всего организма задержался на воспалительной фазе. Стадии раневой инфекции включают загрязнение (контаминацию), колонизацию, местную инфекцию и ее системное распространение (генерализацию). Для оказания необходимого объема помощи врачу необходимо четко различать загрязненные и колонизированные раны, однако точность подобной диагностики при простом осмотре не достигает и 60 процентов. Как правило, это компенсируют микробиологическими и молекулярными исследованиями, однако они занимают значительное время и не всегда доступны. В силу этого все больший интерес представляют физические методы исследования, такие как инфракрасная термография и регистрация бактериальной флуоресценции, а также анализ изображений с помощью алгоритмов машинного обучения. Чтобы совместить преимущества этих методов, канадская компания Swift Medical разработала устройство гиперспектральной визуализации Swift Ray 1. Оно оснащено инфракрасными датчиками для разных длин волн, источниками видимого и ультрафиолетового излучения и соответствующими камерами высокого разрешения. Они позволяют одновременно выполнять фотосъемку и инфракрасную термографию раны и регистрировать флуоресценцию бактерий в ней. Полученные изображения устройство передает на камеру смартфона с интегрированным приложением Swift Skin and Wound. Оно собирает их в датасет, который содержит информацию о физиологии, морфологии и составе тканей в ране. Роберт Фрейзер (Robert Fraser) с коллегами из трех канадских университетов, Центральной больницы имени Прието в Сан-Луис-Потоси, компаний Swift Medical и Vope Medical провели мультицентровое проспективное испытание устройства Swift Ray 1, в котором оценивали его пригодность для дифференциальной диагностики невоспаленных, воспаленных и инфицированных ран. В исследовании приняли участие 66 амбулаторных пациентов из Мексики и Канады. Сканирование ран проводили хирурги, прошедшие инструктаж, в соответствии с полученными рекомендациями (рану очищали, помещали по ее краям идущий в комплекте маркер и снимали под углом 90 градусов с расстояния 15 сантиметров). Клинические характеристики ран оценивали в соответствии с протоколом Международного института раневых инфекций (IWII). Обработку данных проводили методами главных компонент (PCA) и k-ближайших соседей (KNN) для создания нейросетевой модели, кластеризующей раны по признаку наличия инфекции и воспаления. По результатам испытаний PCA-KNN-кластеризация с учетом всех клинических и визуализационных переменных обеспечила общую точность 74 процента при дифференциальной диагностике невоспаленных, воспаленных и инфицированных ран. Для невоспаленных ран чувствительность и специфичность модели составили соответственно 94 и 70 процентов, для воспаленных — 85 и 77 процентов, для инфицированных — 100 и 91 процент. Таким образом, комбинация множественных методов визуализации позволяет создавать модели для улучшенной оценки ран. Подобные устройства для использования в месте оказания помощи могут помочь клиницистам своевременно выявлять и лечить раневые инфекции, заключают авторы работы. В феврале 2023 года американские, китайские и корейские исследователи представили биорезорбируемый беспроводной электрод для мониторинга состояния и электротерапии хронических ран. В конце 2022 года стэнфордская научная команда продемонстрировала умный пластырь для мониторинга и электростимуляции ран, который атравматично отклеивается после использования.