Мультисенсорный музей: междисциплинарный взгляд на осязание, звук, запах, память и пространство

Недавно мы провели исследование: сохраняются ли для тактильных и мультисенсорных репрезентаций те же объектные и пространственные измерения, что и для визуальных[45]. Мы использовали идею о том, что люди с объектным мышлением считывают информацию о свойствах поверхности лучше, чем люди с пространственным мышлением. Для проверки этой гипотезы мы использовали задания, подразумевающие распознавание формы при изменении текстуры, и распознавание текстуры при изменении формы[46]. В процессе как зрения, так и осязания, распознавание формы ухудшалось из-за изменений текстуры у тех, кто мыслил объектно, но не у тех, кто мыслил пространственно. В то же время распознавание текстур ухудшалось из-за изменений формы именно у мыслящих пространственно, а не у мыслящих объектно. Аналогичная картина наблюдалась и в условиях кросс-модальности, когда участники получали доступ к мультисенсорному, независимому от точки обзора, образу, опыту, описанному выше[47]. Люди, мыслящие объектно, хуже распознавали форму при изменении текстуры, в то время как люди с пространственным мышлением продолжали различать форму, независимо от того, изменилась текстура или нет[48]. Таким образом, раскрытие роли объектных и пространственных образов дает больше преимуществ, чем использование недифференцированного подхода, сфокусированного только на визуальном образе. Это разделение важно, потому что и зрение, и осязание кодируют пространственную информацию об объектах – например, размер, форму и различные характеристики объекта. Такая информация вполне может быть использована в качестве независимого от модальности восприятия пространственного образа[49]. Подтверждение этой гипотезы можно найти в одном недавнем исследовании, показывающем, что оценки пространственных образов, в отличие от объектных, были согласованы друг с другом с высокой точностью именно при кросс-модальном, а не внутримодальном распознавании объектов[50].

Кортикальные области коры головного мозга, участвующие в обработке формы объектов на основании визуально-тактильной информации

Основная область коры головного мозга, участвующая в распознавании визуально-тактильной информации – это латеральная затылочная кора (ил. 1), известная как область, отвечающая за визуальное восприятие объектов[51]. В то же время часть латеральной затылочной коры различает объекты как во время зрительной активности, так и при осязании[52]. Эта область коры головного мозга активна как во время осязательного трехмерного восприятия[53], так и во время тактильного двухмерного восприятия формы[54]. Считается, что она отвечает за восприятие геометрических форм в пространстве: она не участвует в распознавании объекта в случае, если человек слышит специфический для данного объекта звук[55], однако начинает реагировать на этот звук после соответствующей тренировки, когда звуковое распознание объекта становится возможным с помощью устройств визуально-слухового сенсорного замещения[56]. Такие устройства преобразовывают визуальную информацию о форме объектов в звуковой поток или «звуковой ландшафт», звучание которого меняется в зависимости от того, какие объекты попадают в камеру: за длину объектов (горизонтальная ось) отвечает длительность звука и стереопанорамирование, за высоту объектов (вертикальную ось) – тон звука, а яркость объектов передается за счет изменения громкости. В результате длительного обучения люди получают возможность извлекать информацию о форме объектов из данных звуковых ландшафтов, что позволяет распознавать знакомые объекты и даже использовать эту информацию при взаимодействии с незнакомыми объектами. Однако это становится возможно только в случае, если человек (зрячий the lateral occipital complex // Nature Neuroscience, № 10: 687–689. или незрячий) обучен данным правилам (понимает, что означают конкретные звуки), а не просто запомнил произвольные звуковые ассоциации[57]. В целом все это подтверждает, что латеральная затылочная кора занимается обработкой информации именно о форме объекта, вне зависимости от того, в какой сенсорной модальности происходит процесс восприятия объекта. Несколько теменных областей коры также демонстрируют мультисенсорное распознавание формы. К их числу принадлежит задняя часть первичной соматосенсорной коры (ил. 1)[58], которая обычно не относилась к числу мультисенсорных несмотря на то, что нейрофизиологические исследования обезьян позволяют говорить о том, что части первичной соматосенсорной коры отзываются также на визуальную стимуляцию[59]. Визуально-тактильное распознавание формы было зафиксировано также в различных частях внутритеменной борозды (ил. 1) в теменной доле, находящейся непосредственно в коре головного мозга, которая играет важную роль в мультисенсорном восприятии[60].