Феликс Хейбек, Алексис Хоуп, Джули Лего и София Брюкнер, исследователи из Медиалаборатории Массачусетского технологического института, написали книгу, которую вы можете носить и «читать» с помощью всего вашего тела. Прототип сенсорной литературы
[46] представляет собой жилет, оснащенный функцией тактильной стимуляции, который связан с книгой и позволяет читателю почувствовать на физическом уровне эмоции, испытываемые главным героем. Надеваемое устройство способно изменять звук, освещение, температуру, стягивать грудную клетку и даже менять сердечный ритм читателя, чтобы передать то, что испытывает в этот момент герой книги.
«Летишь вечером в ощущалку, Генри? – спросил помощник Предопределителя. – Я слышал, сегодня в «Альгамбре» первоклассная новая лента. Там любовная сцена есть на медвежьей шкуре, говорят, изумительная. Воспроизведен каждый медвежий волосок. Потрясающие осязательные эффекты».
Прототип сенсорной стимуляции впервые упоминается в научно-фантастическом романе Олдоса Хаксли «О дивный новый мир» (1932), в котором описывается, как зрители «испытывают ощущения» вымышленных персонажей. «Тактильные фильмы» – фильмы, в которых сочетались ощущения осязания с визуальными эффектами и звуком. Зрители кинотеатра брали в руки металлические шары, закрепленные в подлокотниках стульев, и испытывали тактильные ощущения, повторяющие ощущения персонажей на экране.
Возвращаясь к идее Обрист о том, что сенсорную стимуляцию можно использовать в кинотеатре, чтобы создать более сильные ощущения от просмотра, я могу предположить, что ее идеи могут быть применены следующим образом. Вместо повторения тактильных ощущения персонажей (как в тактильных фильмах из отрывка выше, описывающего, что можно было почувствовать волосы шкуры медведя), эмоциональное состояние персонажа могло бы передаваться за счет подачи коротких резких струй воздуха в середину руки зрителя (как в исследовании Обрист), чтобы передать волнение персонажа. Такую технологию можно применить даже без сопутствующего видеоряда и использовать для дополнения аудиокниг или радиотрансляций. «Осязание эмоций» становится реальным, создавая новые возможности для передачи эмоций персонажа посредством не только зрения и слуха, но также осязания.
В работах Обрист, Форсланда, а также исследователей Массачусетского технологического института приводятся способы создания сильного восприятия другого человека или персонажа посредством невербального преобразования чувств, настроения, сообщений или даже целой истории. Результатом этого становится формирование нового способа познания и понимания человеческих чувств с помощью своего тела. Но как еще можно использовать этот тип информации для интерпретации и понимания других типов данных?
Сенсорная замена
Нейробиолог Дэвид Иглман занимается разработкой специального жилета с тактильной симуляцией, целью создания которого является расширение способностей человека воспринимать данные новым интуитивным способом.
Иглман и его команда в собственной Лаборатории по изучению восприятия и действия в Медицинской школе Стэнфордского университета (США) создали устройство под названием VEST
[47] (по первым буквам от англ. Versatile Extra-Sensory Transducer
[48]) – приспособление, которое позволяет глухим людям воспринимать речь с помощью вибрации. Смартфон или планшет с установленным на нем приложением использует свой микрофон для распознавания звуков. Затем эти звуки передаются по Bluetooth на жилет. Тот преобразует звуки в различные виды вибраций, которые пользователь ощущает спиной.
Иглман делает акцент на том, что испытываемые при этом чувства не следует интерпретировать как своеобразный шрифт Брайля. В своем выступлении на конференции TED в 2015 году
[49] он отметил
[50]:
Вибрация, которую вы чувствуете, когда на вас надет жилет, повторяет частоту вибраций издаваемого звука. То, что вы чувствуете, не является кодом для буквы или слова это также не аналог азбуки Морзе, – вы ощущаете на себе сам звук.
Иглман отделяет этот жилет от других носимых устройств, таких как Apple Watch, где разные варианты вибрации используются для передачи разных сигналов (например, различные варианты шаблонов вибрации для входящего звонка и текстового сообщения).
Вместо этого VEST использует «сенсорную замену» – информация подается в мозг через нестандартные сенсорные каналы, и уже затем в мозге формируется ощущение. Это похоже на продукты EyeMusic и vOICe, рассматриваемые в главе 2, суть работы которых сводится к тому, что мозг способен «видеть» под воздействием звука. В этих случаях, вместо того, чтобы попадать через зрительную зону коры мозга, сигнал поступает в мозг через слуховую зону, а затем уже попадает в соответствующий отдел. VEST также использует сенсорную замену для глухих людей.
Иглман и его команда предложили испытать VEST глухим людям. Во время своей лекции на конференции TED Иглман продемонстрировал, как Джонатан, 37-летний глухой от рождения мужчина, понимал значение сложных комбинаций вибраций после всего пяти дней обучения пользования устройством.
Следующим шагом для Иглмана и его команды в разработке VEST станет преобразование другой информации, например данных фондовых рынков или прогноза погоды. Так, например, если изменения на фондовом рынке будут передаваться посредством слабой вибрации, пользователи VEST смогут чувствовать и даже предугадывать определенные экономические тренды.
Больше не нужно ждать подарков в виде отдельных ощущений, отмеряемых нам матерью-природой. Вместо этого, как и любой хороший родитель, она дала нам инструменты, с которыми мы можем вылететь из гнезда и двигаться в развитии по своей собственной траектории».
Итак, далее встает вопрос: как мы будем использовать наши чувства, такие как осязание, чтобы ощущать мир по-новому?
В главе 2 мы рассмотрели, как с помощью дополненной реальности можно преобразовать наши среду и контекст, используя новейшие визуальные возможности. Здесь же, учитывая прогнозы Иглмэна, можно предположить, что в будущем мы сможем не только видеть, но и чувствовать по-новому и познавать мир, как никогда раньше, при помощи прикосновений. От работы с деформируемым экраном до передачи эмоций через вибрации, до нового восприятия мира через одежду, оснащенную устройствами тактильной стимуляции, как, например, разработанный Иглманом жилет, – все это подтверждает, что наше дополненное будущее наощупь не «стеклянное» и несет в себе технологии, интуитивно понятные любому человеку. Мы существуем в трехмерном пространстве и ощущаем вещи всем своим телом, но технологически мы часто ограничены только двумя измерениями экрана. Самые мощные AR-приложения позволят нам почувствовать вещи, как будто они существуют на самом деле, и использовать эти возможности человечества в новых гибридных цифровых устройствах для того, чтобы еще больше расширить потенциал нашего восприятия.
