Возвращаясь к идее Обрист о том, что сенсорную стимуляцию можно использовать в кинотеатре, чтобы создать более сильные ощущения от просмотра, я могу предположить, что ее идеи могут быть применены следующим образом. Вместо повторения тактильных ощущения персонажей (как в тактильных фильмах из отрывка выше, описывающего, что можно было почувствовать волосы шкуры медведя), эмоциональное состояние персонажа могло бы передаваться за счет подачи коротких резких струй воздуха в середину руки зрителя (как в исследовании Обрист), чтобы передать волнение персонажа. Такую технологию можно применить даже без сопутствующего видеоряда и использовать для дополнения аудиокниг или радиотрансляций. «Осязание эмоций» становится реальным, создавая новые возможности для передачи эмоций персонажа посредством не только зрения и слуха, но также осязания.
В работах Обрист, Форсланда, а также исследователей Массачусетского технологического института приводятся способы создания сильного восприятия другого человека или персонажа посредством невербального преобразования чувств, настроения, сообщений или даже целой истории. Результатом этого становится формирование нового способа познания и понимания человеческих чувств с помощью своего тела. Но как еще можно использовать этот тип информации для интерпретации и понимания других типов данных?
Сенсорная замена
Нейробиолог Дэвид Иглман занимается разработкой специального жилета с тактильной симуляцией, целью создания которого является расширение способностей человека воспринимать данные новым интуитивным способом.
Иглман и его команда в собственной Лаборатории по изучению восприятия и действия в Медицинской школе Стэнфордского университета (США) создали устройство под названием VEST[47] (по первым буквам от англ. Versatile Extra-Sensory Transducer[48]) – приспособление, которое позволяет глухим людям воспринимать речь с помощью вибрации. Смартфон или планшет с установленным на нем приложением использует свой микрофон для распознавания звуков. Затем эти звуки передаются по Bluetooth на жилет. Тот преобразует звуки в различные виды вибраций, которые пользователь ощущает спиной.
Иглман делает акцент на том, что испытываемые при этом чувства не следует интерпретировать как своеобразный шрифт Брайля. В своем выступлении на конференции TED в 2015 году[49] он отметил[50]:
Иглман отделяет этот жилет от других носимых устройств, таких как Apple Watch, где разные варианты вибрации используются для передачи разных сигналов (например, различные варианты шаблонов вибрации для входящего звонка и текстового сообщения).
Вместо этого VEST использует «сенсорную замену» – информация подается в мозг через нестандартные сенсорные каналы, и уже затем в мозге формируется ощущение. Это похоже на продукты EyeMusic и vOICe, рассматриваемые в главе 2, суть работы которых сводится к тому, что мозг способен «видеть» под воздействием звука. В этих случаях, вместо того, чтобы попадать через зрительную зону коры мозга, сигнал поступает в мозг через слуховую зону, а затем уже попадает в соответствующий отдел. VEST также использует сенсорную замену для глухих людей.
Иглман и его команда предложили испытать VEST глухим людям. Во время своей лекции на конференции TED Иглман продемонстрировал, как Джонатан, 37-летний глухой от рождения мужчина, понимал значение сложных комбинаций вибраций после всего пяти дней обучения пользования устройством.
Следующим шагом для Иглмана и его команды в разработке VEST станет преобразование другой информации, например данных фондовых рынков или прогноза погоды. Так, например, если изменения на фондовом рынке будут передаваться посредством слабой вибрации, пользователи VEST смогут чувствовать и даже предугадывать определенные экономические тренды.
Итак, далее встает вопрос: как мы будем использовать наши чувства, такие как осязание, чтобы ощущать мир по-новому?