Группа исследователей из лабораторий Google и MIT создала алгоритм, позволяющий убирать с фотографий различные препятствия, загораживающие объект съемки или ухудшающие его видимость. Результаты работы были представлены на конференции SIGGRAPH 2015, текст доклада опубликован [PDF] на сайте Массачусетского технологического института.
Для обработки необходимо несколько снимков с небольшим смещением относительно объекта съемки. Алгоритм определяет границы контрастных объектов, после чего сравнивает перемещение движущихся границ объектов относительно друг друга и отделяет объекты на переднем плане – обычно именно они являются препятствием – от объектов на фоне. После этого программа из серии изначальных снимков комбинирует два «очищенных» результата, один для фона, один для переднего плана. В качестве примера в демонстрационном ролике показаны несколько снимков, с которых убрана сетка Рабица и отражения в стеклах.
Ранее исследователи из MIT уже публиковали исследование, посвященное фильтрации фотографий от отражения при фотосъемке через окно с двойным стеклом – алгоритм определял в кадре «задвоившееся» изображение и убирал его с фотографии. Благодаря совместной работе с Google, разработчикам удалось улучшить алгоритм для применения не только к отражениям, но и потенциально к любым помехам на переднем плане.
Он оказался точнее и эффективнее предыдущих версий
Американские ученые разработали тонкопленочный охладитель, с помощью которого люди с протезами руки могут чувствовать температуру предметов. С помощью полупроводников и сверхрешеток он охлаждается в участках культи, которые воспринимают механические и термические ощущения, что вызывает соответствующие ощущения в фантомной руке. По сравнению с предыдущими термоэлектрическими устройствами эта разработка меньше весит и точнее передает информацию о температуре. Разработка описана в статье журнала Nature Biomedical Engineering. Ученые и биоинженеры разрабатывают все больше интерфейсов, которые позволяют с помощью стимуляции нервов в культе передавать ощущения при использовании протезов, включая давление, вибрацию и боль. Однако пока нет заметных успехов в разработке устройств для ощущения температуры в протезе — все существующие разработки неудобны для повседневного использования из-за большого веса и неэффективного энергопотребления. Генерация реалистичных и информативных тепловых сигналов в протезах позволила бы получать мультимодальную сенсорную информации об окружающей среде в режиме реального времени. Например, определять, температуру напитка, реагировать на горячие предметы или ощущать тепло личного прикосновения. Люк Осборн (Luke Osborn) с коллегами из Университета Джонса Хопкинса выдвинули гипотезу, что технологию тонкопленочного термоэлектрического охлаждения (TFTEC) можно использовать для передачи сигнала с протеза на конкретные рецепторные участки на культе, чтобы создавать полноценное ощущение температуры в фантомной руке. Для этого они разработали неинвазивный термоневральный интерфейс — между термическими стимулами и кожными рецепторами — с использованием устройства TFTEC. В этом устройстве использовались монокристаллические материалы и иерархические сверхрешетки, что придает ему высокую рабочую мощность, плотность охлаждения и, как следствие, быструю и энергоэффективную стимуляцию. Устройство толщиной 1,2 миллиметра и массой 0,05 грамма способно снижать температуру на 10-20 градусов Цельсия за три секунды и удерживать этот температурный градиент в течение длительного времени. В лабораторных условиях эти показатели были значительно лучше, чем у предыдущих, объемных, версий термоэлектрических интерфейсов. Поскольку после ампутации нервы культи могут «иннервировать» фантомную конечность, ученые определили у четырех человек с ампутированной рукой участки культи, которые при механической или термической стимуляции вызывали ощущения прикосновения и температуры в фантомной руке. Устройство TFTEC поместили на кожу четырех участников с ампутацией, чтобы восстановить ощущение температуры в фантомной руке. Все участники ощущали охлаждение c экспериментальным устройством, с контрольным термоэлектрическим устройством эффект почувствовали только два участника. Кроме того, участники быстрее и интенсивнее воспринимали холодовые ощущения на культе и в фантомной руке по сравнению со стандартным объемным устройством. Аналогичные результаты показал эксперимент со здоровыми добровольцами, которые касались устройства указательным пальцем. В другом эксперименте участники управляли виртуальным модульным протезом руки, чтобы прикоснуться к виртуальным объектам и определить холодный. Во всех тестах устройство TFTEC помогало людям быстрее и точнее справиться с заданием по сравнению с классическими устройствами. Наделять протез ощущениями важно, чтобы человек без конечности мог нормально адаптироваться к нему и жизни с ним. Например, недавно мы рассказывали, что тактильная стимуляция облегчила управление протезом руки.