31.
Дело в том, что ввиду снижающейся с возрастом пластичности мозга сенсорное замещение требуется разрабатывать индивидуально — как под текущий возраст, так и с учетом возраста приобретения слепоты. См. Bubic, Striem-Amit, Amedi (2010).32.
Meijer PB (1992). An experimental system for auditory image representations, IEEE Trans Biomed Eng 39 (2): 112–121.33.
Технические подробности см. на www.seeingwithsound.com, и там же можно послушать, как звучит работающий vOICe-алгоритм.34.
Arno P et al. (1999). Auditory coding of visual patterns for the blind, Perception 28 (8): 1013–1029; Arno P et al. (2001). Occipital activation by pattern recognition in the early blind using auditory substitution for vision, Neuroimage 13 (4): 632–645; Auvray M, Hanneton S, O’Regan JK (2007). Learning to perceive with a visuo-auditory substitution system: localisation and object recognition with “the vOICe”, Perception 36: 416–430; Proulx MJ et al. (2008). Seeing “where” through the ears: effects of learning-by-doing and long-term sensory deprivation on localization based on image-to-sound substitution, PLoS One 3 (3): e1840.35.
Cronly-Dillon J, Persaud K, Gregory RP (1999). The perception of visual images encoded in musical form: a study in cross-modality information transfer, Proc Biol Sci 266 (1436): 2427–2433; Cronly-Dillon J, Persaud KC, Blore R (2000). Blind subjects construct conscious mental images of visual scenes encoded in musical form, Proc Biol Sci 267 (1458): 2231–2238.36.
Отзыв Пэт Флетчер из статьи в журнале американского общества слепых ACB Braille Forum — цит. по Maidenbaum S et al. (2014). Sensory substitution: closing the gap between basic research and widespread practical visual rehabilitation, Neurosci Biobehav Rev 41: 3–15.37.
У Amedi et al (2007) конкретно продемонстрирована активность в латеральной затылочной тактильной визуальной области (LOtv). Как представляется, эта область кодирует информацию о форме — активируется ли она зрением, осязанием, заучиванием или, как зрительный ландшафт, транслируется в звуковой. См. Amedi et al (2007). Shape conveyed by visual-to-auditory sensory substitution activates the lateral occipital complex, Nat Neurosci 10: 687–689. Краткое обобщение опыта одного из пользователей см. в Piore A (2017). The Body Builders: Inside the Science of the Engineered Human (New York: Ecco).38.
Collignon O et al. (2007). Functional cerebral reorganization for auditory spatial processing and auditory substitution of vision in early blind subjects, Cereb Cortex 17 (2): 457–465.39.
Abboud S et al. (2014). EyeMusic: Introducing a “visual” colorful experience for the blind using auditory sensory substitution, Restor Neurol Neurosci 32 (2): 247–257. Технология EyeMusic опирается на более раннюю технологию SmartSight: Cronly-Dillon et al. (1999, 2000).40.
Massiceti D, Hicks SL, van Rheede JJ (2018). Stereosonic vision: Exploring visual-to-auditory sensory substitution mappings in an immersive virtual reality navigation paradigm, PLoS One 13 (7): e0199389; Tapu R, Mocanu B, Zaharia T (2018). Wearable assistive devices for visually impaired: A state of the art survey, Pattern Recognit Lett; Kubanek M, Bobulski J (2018). Device for acoustic support of orientation in the surroundings for blind people, Sensors 18 (12): 4309. См. также Hoffmann R et al. (2018). Evaluation of an audio-haptic sensory substitution device for enhancing spatial awareness for the visually impaired, Optom Vis Sci 95 (9): 757.41.
В развивающемся мире самая распространенная причина слепоты — трахома (инфекционная болезнь, которую вызывают хламидии), по вине которой зрения лишились почти 2 млн человек. Второй по распространенности причиной выступает эндемическое для тридцати африканских стран заболевание онхоцеркоз. Многие ученые считают, что сенсорно-заместительное программное обеспечение поможет заново научить видеть тех, кто лишился зрения, в сочетании с другими видами терапии (например, хирургией роговицы).42.
Koffler T et al. (2015). Genetics of hearing loss, Otolaryngol Clin North Am 48 (6): 1041–1061.