Дополненная реальность. Все, что вы хотели узнать о технологии будущего
Шрифт:
В основе работы E-Sense лежит использование электростатических полей, которые вводят в заблуждение наше чувство осязания и имитируют различные уровни трения, позволяя создавать ощущение текстуры на плоском экране. В этой технологии используется Закон Кулона: притяжение или отталкивание объектов или частиц в зависимости от их электрического заряда. Так, например, когда вы натираете воздушный шар о свои волосы, он прилипает. Если потереть воздушный шар о голову, электроны переходят с ваших волос: волосы положительно заряжены, воздушный шар отрицательно заряжен, а противоположные заряды притягиваются. Senseg создает аналогичную силу притяжения между вашим пальцем и экраном. Управляя этой силой, можно создавать целую тактильную гамму, обеспечивая многообразные ощущения от взаимодействия с разными изображениями.
Представьте, что вы используете эту технологию на смартфоне или планшете, чтобы посетить виртуальный зоопарк прямо у себя дома и почувствовать на ощупь мягкую овечью шерсть. Тактильная функция может теперь соответствовать тому, что вы видите с использованием AR: виртуальное больше не ощущается как «стекло».
Fujitsu Labs из Японии – еще одна компания, работающая над технологией тактильной симуляции для сенсорных экранов. Компания презентовала прототип планшета с функцией тактильной симуляции на Всемирном мобильном конгрессе в 2014 году в Барселоне, где было показано, как технология может имитировать объемные детали, такие как выпуклости, гребни и выступы на поверхностях сенсорного экрана. Эта программа позволяет испытать ощущение как от поворота ключа в замке, прикосновения к песку или к струнам музыкального инструмента.
Вместо электростатической тактильной обратной связи Fujitsu Labs использует для тактильного эффекта ультразвуковые вибрации, импульсы которых передаются с различной силой. Вибрации отталкивают палец от поверхности планшета и в зависимости от силы имитируют различные текстуры. Быстрое изменение импульсов между низким и высоким трением может создать ощущение грубой или неровной поверхности, или же поверхность может казаться гладкой за счет подаваемого воздуха, уменьшающего силу трения. Fujitsu Labs планирует коммерциализировать эту технологию, в частности интегрируя ее в онлайн-магазины, где особенно важна возможность потрогать ткань, из которой сшита приобретаемая вещь.
Деформируемые экраны
И Senseg, и Fujitsu имитируют чувство осязания на плоских сенсорных экранах. Но что, если сенсорные экраны могли бы изменять свою форму и физически принимать форму изображений или объектов? Представьте, что вы своими руками преобразовываете виртуальные объекты из двумерного пространства в трехмерный мир.
GHOST [36] – это исследовательский проект, над которым с 2013 года работают разработчики в четырех университетах Великобритании, Нидерландов и Дании, где они занимаются изучением дисплеев с изменяющейся формой. Исследователи создали плоскоэкранный дисплей Lycra, который, в отличие от стекла, может изменять свою форму, благодаря чему можно почувствовать форму соответствующих объектов.
36
Сокр. от Generic and Highly Organic Shape-Change Interfaces. В пер. с англ.: «Универсальные и высокоорганические изменяющие форму интерфейсы». – Прим. пер.
Каспер Хорнбэк, исследователь из Копенгагенского университета, отмечает: «Почти все экраны имеют квадратную форму, поэтому для реализации данной технологии в полном объеме требуется возможность изменения их формы. В поле интересов наших исследований находятся экраны, которые могли бы изменять свою форму». Эта идея перекликается с мыслью Брета Виктора об экране компьютера как динамическом визуальном носителе, который может принимать практически любую форму, и вот теперь возможность появления такой среды становится все более реалистичной.
Такая технология могла бы, например, позволить хирургу работать на виртуальном мозге, получив необходимый осязательный опыт перед выполнением аналогичной операции в реальном мире. Художники и дизайнеры, работающие с различными физическими материалами, такими как, например, глина, смогут двигать объекты собственными руками и хранить их в своем компьютере. Хорнбэк предполагает, что с помощью такого дисплея вы сможете держать руку вашего близкого человека, даже находясь на другом континенте.
Эсбен Варминг Педерсен, член исследовательской группы Копенгагенского университета, объясняет, чем отличается работа деформируемого дисплея от того, как работают обычные стеклянные сенсорные экраны. «Все, что видит iPad, – это кончик пальца, касающийся стекла. Так, когда iPad пытается определить, где и как мы его касаемся, устройство можно рассматривать как своего рода систему координат». Деформируемый дисплей имеет более сложный принцип работы: когда вы прикладываете палец к экрану, камера считывает информацию в трех изменениях и определяет силу давления пальца на поверхность. Педерсен работает над разработкой алгоритмов компьютерного зрения, которые позволят распознавать эти трехмерные данные и использовать их таким образом, чтобы компьютер мог лучше понять и применить их в своей работе.
Одна из проблем, которую обозначает Педерсен, заключается в том, что мы еще не знаем, как работать с этими новыми экранами. Он говорит о том, что к настоящему моменту уже выработался определенный «словарь» для взаимодействия с двумерными дисплеями, например, если свести пальцы, изображение уменьшится, а если смахнуть пальцем картинку, она сменится другой. Однако если говорить о жестах в трехмерном пространстве, или деформируемых жестах, использование таких экранов уже становится менее очевидным. Педерсен в настоящее время занимается разработкой такого интуитивного словаря новых жестов.
Педерсен и Хорнбэк опубликовали [37] в 2014 году исследование по распознаванию жестов, где респондентов попросили показать жесты, которые они находят подходящими для выполнения различных задач, таких как выбор, навигация и трехмерное моделирование на деформируемом экране. Среди жестов, которые предлагали участники исследования, были движения за дисплеем, толчок ладонью с вытянутыми пальцами, захват и скручивание.
Интеграция тактильного ощущения за пределами экрана
37
Giovanni Maria Troiano, Esbin Warming Pedersen, Kasper Hornbaek, «User-Defined Gestures for Elastic, Deformable Displays», Международная Конференция по усовершенствованным визуальным интерфейсам, 2014 год Gestures.pdf). – Прим. авт.
Компания Disney Research Labs использует другой подход к технологии тактильной стимуляции, не делая упор на разработку специальных экранов, но развивая новые способы для взаимодействия с системой. Технология REVEL [38] , разработанная в 2012 году Иваном Пупыревым и Оливье Бо, может обеспечить интеграцию искусственных тактильных ощущений не только в сенсорные экраны, но и в предметы повседневного пользования, такие как мебель, стены, деревянные и пластиковые предметы и даже человеческую кожу.
38
https://www.disneyresearch.com/project/revel-programming-the-sense-of-touch. – Прим. авт.
REVEL использует новый тактильный эффект, которому Disney Research Labs дала название реверсивная электровибрация [39] . Работа устройства заключается в том, что оно выдает слабый электрический сигнал в тело пользователя, создавая колебательное электрическое поле вокруг его пальцев. Когда пользователь проводит пальцами по поверхности объекта, он чувствует соприкосновение с определенной текстурой, что создает дополненную реальность. Различные тактильные ощущения могут быть созданы путем изменения уровня сигнала.
39
От англ. Reverse Electrovibration, сокр: REVEL. – Прим. авт.