Программисты Google из подразделения Daydream Labs, которое занимается разработками в области виртуальной реальности, представили технологию смешанной реальности, которая «стирает» очки виртуальной реальности с лица пользователя. Об этом сообщается в блоге Google Research.
Смешанной реальностью обычно называют изображение пользователя в виртуальной или дополненной реальности, доступное стороннему наблюдателю. Как правило, для этого используется хромакей — пользователя в VR-очках на фоне контрастного одноцветного экрана снимает камера, и вместо фона накладывается изображение из виртуального окружения. Такой подход позволяет наглядно увидеть со стороны поведение другого человека в виртуальном мире, однако его лицо по-прежнему закрыто очками, поэтому нельзя точно определить выражение лица или направление взгляда.
Для того, чтобы «стереть» оборудование и показать выражение лица и направление взгляда пользователя, в Google использовали технологии машинного обучения и трехмерного компьютерного зрения. Подробностей представители компании не раскрывают, описывая лишь общий принцип создания изображения с «прозрачными» VR-очками.
Сначала с помощью 3D-сканера разработчики построили динамическую модель лица пользователя, которая умеет моргать и смотреть в разные стороны в движении. Затем 3D-модель лица наложили на реальное изображение человека при рендеринге финального видео смешанной реальности, при этом для погружения в VR-мир используются модифицированные очки HTC Vive, которые отслеживают направление взгляда пользователя, «оживляя» модель.
Несмотря на относительно правдоподобное реконструирование лица, оно по-прежнему остается 3D-моделью и может вызвать неприятные ощущения у стороннего наблюдателя — эффект «Зловещей долины». Для того, чтобы предотвратить это явление, разработчики оставили полупрозрачное изображение очков на голове.
Ранее разработчики из Daydream Labs создали виртуальный аватар в виде движущихся глаз, а также предложили бороться с троллями в виртуальной реальности, делая их «призраками» — аватар нарушителя социальных норм становится невидимым для других пользователей.
Это позволяет тратить в пять раз меньше энергии, чем при полете
Стартап Revolute Robotics из Аризоны разработал гибридного робота, который способен как летать, так и ездить по поверхности. Он представляет собой квадрокоптер, закрепленный на кардановом подвесе внутри металлической клетки сферической формы. Она защищает дрон от повреждений при столкновении с препятствиями, а также выступает в роли опоры при движении по земле, так как благодаря подвесу может свободно вращаться вокруг дрона во всех направлениях. По замыслу разработчиков, робот будет использовать для дистанционного обследования технического состояния оборудования и охраны объектов, сообщает издание New Atlas. Идея о размещении дронов целиком внутри защитного каркаса не нова. Несмотря на дополнительный вес, такой подход позволяет защитить дрон со всех направлений от повреждений при столкновении с препятствиями. Особенно это актуально при полетах в тесных помещениях с большим количеством объектов, например, с целью инспекции состояния оборудования технических сооружений. Такой дрон, к примеру, сделала швейцарская компания Flybotix. Разработанный ею бикоптер имеет защиту в виде почти сферической сетки, полностью покрывающей беспилотник. Схожую конструкцию для защиты дрона использовали и японские инженеры. Однако у предложенного ими варианта была особенность — сферическая защитная клетка, состоящая из двух независимых полусфер, имела возможность свободно вращаться вокруг двух осей, благодаря чему соприкосновение с препятствием меньше влияло на траекторию полета. Дрон, разрабатываемый стартапом Revolute Robotics, также помещен внутрь металлической защитной сетки сферической формы, которая способна вращаться вокруг беспилотника. Но благодаря карданному подвесу, которым квадрокоптер изнутри соединен со сферической оболочкой, это вращение может происходить не по двум осям, а в любом направлении. Эту способность инженеры решили использовать — робот может не только летать, но и ездить по поверхности, используя собственную защитную оболочку в роли всенаправленного колеса. https://www.youtube.com/watch?v=YUcwM7pCZkk Перемещение по поверхности происходит с помощью воздушных винтов дрона, который может наклоняться внутри свободно вращающейся вокруг него сферической оболочки в нужном направлении, регулируя скорость и направление движения. Упругая конструкция клетки и колец подвеса сглаживает толчки и удары, выполняя роль амортизатора. Регулируя уровень тяги пропеллеров, робот способен взбираться по крутым склонам, а при встрече с препятствием, которое нельзя переехать, может просто облететь его по воздуху. При этом на полет тратится в пять раз больше энергии, поэтому передвижение по поверхности оказывается предпочтительнее. В качестве полезной нагрузки робот может нести камеры, лидары и другие сенсоры. Поэтому его можно будет использовать, например, для составления трехмерных карт объектов и обследования технического состояния оборудования и инженерных сооружений, в том числе для инспекции труб. Другим возможным применением робота, по мнению разработчиков может стать охрана территории. Впрочем, защитный каркас — не всегда наилучшее решение, ведь дополнительный вес защиты будет уменьшать время работы дрона. Поэтому инженеры компании Cleo Robotics, которые разработали дрон Dronut X1 специально для работы в помещениях, применили другой подход. Два соосных несущих винта дрона X1 находятся полностью внутри похожего на пончик корпуса, и поэтому надежно защищены от встречи со стенами и другими препятствиями.