Дополненная реальность. Все, что вы хотели узнать о технологии будущего

Такие примеры, как: возможность дать незрячим людям подобие зрения, появление новых интерактивных направлений для творчества, создание роботов, помогающих нам в повседневной жизни, доказывают, что AR – технология, позволяющая взаимодействовать с этим миром по-новому. Дополненная реальность может повысить уровень нашей жизни и вдохновить на изменения, благодаря которым мы станем ближе к окружающему нас миру и друг к другу.

Если заменить слово «машина» на слово «человек» в цитате Дзиги Вертова в начале этой главы: «Я машина, показывающая вам мир таким, каким только я его смогу увидеть», – можно оценить то, насколько обогащает нашу жизнь Интернет, собирая по всему миру опыт, накопленный другими людьми. Чтобы оказать позитивное влияние на общество и внести свой вклад в развитие человечества, к AR нужно применять те же принципы, по которым изначально создавалась Всемирная Паутина – ее основным принципом является всепринимающий характер, без исключений.

Глава 3. Тактильные ощущения

Отличием следующей волны дополненной реальности является новый сенсорный опыт, задействующий и другие органы чувств, помимо зрения. За счет осязательных эффектов в AR есть возможность не только синхронизировать то, что мы видим, с тем, как мы чувствуем, но и создавать новые способы тактильной коммуникации. Механизм тактильного отклика, используемый в Apple Watch , обеспечивает , к примеру, обратную связь для уведомлений, а в приложениях виртуальной реальности таких производителей, как Tactical Haptics [32] , он позволяет выйти на новый уровень реализма. На основании этого можно отметить тенденцию развития цифровой тактильности.

32

http://tacticalhaptics.com – Прим. авт.

В реальном мире вы можете использовать свои руки, чтобы прикоснуться к чему-либо, поднять некий предмет или что-то сделать. В AR виртуальная составляющая существует в вашем физическом пространстве, но если вы протянете руку, чтобы коснуться виртуального объекта, в зависимости от того, используете ли вы смартфон или очки, вы почувствуете стекло или просто пустоту.

В главе 1 распознавание описывалось как встраивание виртуальных объектов в трехмерное пространство реального мира. Распознавание в AR сегодня сконцентрировано на визуальной составляющей, но как же быть с другими органами чувств? Если одной из целей AR является создание единой среды, в которой реальное и дополненное неразличимы, то иллюзия, очевидно, разрушается, когда пользователь, пытаясь прикоснуться к виртуальному объекту, ничего при этом не чувствует. В следующем поколении AR прикосновение к виртуальным объектам становится возможным, размывая и дальше грань между реальным и виртуальным.

Тактильные ощущения помогают нам ориентироваться и лучше чувствовать реальный мир. Наше чувство осязания помогает нам получать информацию на более глубоком уровне и ощущать такие характеристики предмета, как текстура и вес. Это позволяет понять, из чего сделан предмет и как он соотносится с другими предметами. Осязание позволяет нам убедиться, что объект существует физически.

Для меня утверждение, приведенное выше, оставалось верным до того момента, пока мои чувства не были введены в заблуждение, когда я впервые испытала устройства с применением haptics (технологии, обеспечивающей тактильную обратную связь) в 2011 году в Magic Vision Lab в Университете Южной Австралии. Я помню тот момент, когда я изо всех сил пыталась определить, что было физически реальным и что виртуальным. Я была ошеломлена. Я могла посмотреть и прикоснуться к виртуальной рыбе, чувствуя ее, будто она была реальной. Это было совершенно новым и сбивающим с толку ощущением: касаться виртуальных объектов и получать тактильную обратную связь от чего-то, что физически не существует в реальном мире. Как это возможно?

Нося портативный шлем-дисплей (HMD) и используя тактильный девайс под названием PHANTOM Desktop, оснащенный похожим на шариковую ручку устройством, которое нужно держать в руке, я могу касаться виртуальных объектов, появляющихся в моем физическом окружении, и ощущать их. Это тактильное устройство имитирует контакт, используя три небольших двигателя, которые обеспечивают обратную связь, создавая давление на стилус. В дополнение к текстуре, с помощью этого устройства можно ощутить вес виртуального предмета.

Это очень правдоподобная иллюзия: то, что я видела, действительно соответствовало моим ощущениям. Визуальная и тактильная составляющие тесно взаимосвязаны в реальности, но, как правило, при использовании AR-устройств эта взаимосвязь теряется. Последний опыт навсегда изменил мое представление о дополненной реальности и повлиял на мое видение того, как эта новая среда будет развиваться в будущем.

В 2011 году я написала книгу «Кто боится жуков?» [33] , первую в мире AR-книгу с возможностью распознавания образов при помощи iPad. Книга объединила искусство моделирования бумажных фигур (разрезание, склеивание и складывание из бумаги) с магией AR, благодаря которой книга становилась интерактивной, позволяя лучше понять природу страха перед насекомыми. Если смотреть на книгу через iPad или смартфон, то на ней периодически появлялись различные виртуальные насекомые и членистоногие, в том числе волосатый тарантул, который мог поползти по руке читателя. Когда я работала над этой книгой, технология цифровой тактильности еще не была разработана в Magic Vision Lab, но теперь я отчетливо представляю, как эта технология может быть интегрирована в следующую редакцию моей книги. Благодаря этой технологии ощущение страха будет более сильным, т.к. можно будет не только увидеть паука, ползающего по вашей руке, но также и почувствовать его вес и прикосновение к коже.

33

https://vimeo.com/25608606 – Прим. авт.

Как и в случае с вышеупомянутым примером виртуальной рыбы, можно воссоздать то, как мы ощущаем конкретные вещи в физическом мире, и применять эти свойства к виртуальным объектам с целью улучшения качества «распознавания». Для дальнейшего развития AR как новой среды, важно найти и исследовать новые способы использования технологии дополненной цифровой тактильности, помимо воспроизведения ощущений от аналогов из окружающей среды.

Например, можем ли мы создать приложения с контрастными тактильными свойствами, когда что-то мягкое по своим свойствам будет восприниматься как нечто твердое? Как мы можем выйти за пределы экрана, чтобы по-новому испытывать чувство осязания? И как еще мы можем использовать тактильную стимуляцию в невербальных коммуникациях? В этой главе мы поговорим об исследованиях и инновациях в области тактильных технологий, проливающих свет на эти вопросы.

Тактильные технологии, применяемые в сенсорных экранах

В 2011 году в Magic Vision Lab я впервые стала свидетелем функционирования тактильной технологии, но оборудование, требуемое для ее применения, было дорогостоящим, громоздким и не доступным для обычного человека. Использование основной части AR-приложений на сегодняшний день предполагает наличие смартфона или планшета, а в ближайшем будущем также ожидается более широкое распространение интерактивных очков, которые изменяют возможности тактильной стимуляции в AR. Если раньше примером ее использования было только взаимодействие с сенсорным экраном смартфона или планшета, то теперь появляются новые виды применения.

В статье «Краткие рассуждения о будущем дизайна взаимодействий» (2011) [34] Брет Виктор, разработчик пользовательских интерфейсов и процессов взаимодействия человека с компьютером, отмечает, что в большинстве концепций взаимодействия будущего не уделяется внимание тому, что чувствуют наши руки и как они манипулируют вещами. Он пишет, что почти каждый объект в мире имеет свойства, которые можно почувствовать, прикоснувшись к нему, – будь то вес, текстура, пластичность или форма. Тем не менее он говорит, что такие устройства, как iPad, «приносят в жертву все тактильное богатство работы с нашими руками». Виктор рассуждает о будущем, когда появится новая «динамическая среда, которую мы сможем видеть, чувствовать и изменять».

34

Bret Victor, «A Brief Rant on the Future of Integration Design» (http:// worrydream.com/ABriefRantOnTheFutureOfInteractionDesign). – Прим. авт.

Как далеко мы продвинулись с 2011 года и с момента выхода статьи Виктора? В 2015 году Apple представила механизм тактильного отклика на iPhone и iPad, обеспечив тактильную обратную связь для пользователя. Тактильные устройства обратной связи и контроллеры становятся предметами активной разработки в индустрии игр VR, а также, вероятно, мы увидим в ближайшем будущем эту технологию, адаптированную для AR-приложений.

Технология E-Sense компании Senseg, которая была впервые продемонстрирована на Международной выставке бытовой электроники (CES) в 2012 году, представляет собой один из способов интеграции тактильной симуляции в AR посредством планшета или смартфона.

Дейв Райс, вице-президент основанной в Финляндии компании Senseg, описывает данную технологию как внедрение тактильных эффектов в сенсорные дисплеи различных устройств, включая смартфоны, планшетные компьютеры, сенсорные панели и игровые устройства. Он рассматривает возможности приложений, приводя в качестве примера игру «Охота за сокровищами», смысл которой заключается в поиске спрятанного сундука с сокровищами, но найти его на экране можно только на ощупь. Райс добавляет [35] : «Там не было визуальных подсказок, и это очень увлекательно, потому что теперь у нас есть возможность дополнить картинку осязаемыми эффектами, это позволяет создавать новый мир открытий».

35

«New Technology: Haptic Feedback for Touchscreens» be/FiCqlYKRlAA). – Прим. авт.