Степень перекрывания клеточных ансамблей зависит от того, сколько таких ансамблей мы пытаемся впихнуть в сеть. Разумеется, перекрывание будет значительным, если мы попытаемся сохранить в себе слишком много воспоминаний. Наступит момент, когда невозможно будет установить порог, одновременно и позволяющий вспоминать, и препятствующий смешению воспоминаний. Как избежать подобной катастрофической информационной перегрузки? Дело в том, что у каждой нейронной сети, хранящей воспоминания, существует максимальная емкость.
В клеточном ансамбле все нейроны создают синапсы со всеми другими нейронами ансамбля, так что любой фрагмент воспоминания может запустить процесс воссоздания остальных его частей. Так, снимок возлюбленного может заставить женщину вспомнить о его доме, а посещение его дома – о нем самом. В этом случае процесс припоминания – двусторонний. Однако есть и примеры односторонних процессов, когда воспоминание подобно рассказу, где определенная последовательность событий разворачивается в довольно строгом хронологическом порядке. Как выстроить такое воспоминание? Ответ очевиден: расположить синапсы так, чтобы нейронное возбуждение могло распространяться по ним лишь в одном направлении. В синаптической цепочке, показанной на рис. 22, возбуждение распространяется слева направо.
Рис. 22. Синаптическая цепочка
Подытожим эту теорию, описывающую процесс вспоминания. Идеи представлены нейронами, совокупности (ассоциации) идей – связями между нейронами, а воспоминание – клеточным ансамблем или синаптической цепочкой. Воспоминание является нам, когда нейронное возбуждение успешно распространяется после того, как его возбудил некий фрагментарный раздражитель. Связи в клеточном ансамбле или синаптической цепочке устойчивы и сохраняются в течение долгого времени, вот почему детские воспоминания могут не покидать нас и в зрелые годы.
Психологическая составляющая этой теории описывается
Теорию коннекционизма создавало и развивало во второй половине XX века несколько поколений исследователей. За несколько десятилетий она несколько присмирела под градом неумолкающей критики. Еще в 1951 году Карл Лешли, первооткрыватель явления кортикальной эквипотенциальности, опубликовал знаменитую статью «Проблема серийности и порядка в поведении», где подверг теорию коннекционизма уничижительному разбору. Его первое замечание самоочевидно: мозг способен порождать практически бесконечное количество разнообразных последовательностей сигналов. Синаптическая цепочка, может быть, идеально подходит для того, чтобы заучить наизусть стихотворение и выдавать одну и ту же последовательность слов всякий раз, когда это требуется, но вряд ли годится для обычной языковой практики, где одно и то же предложение редко повторяется дословно.
Первое возражение Лешли сравнительно легко отвести. Вообразим синаптическую цепочку, которая разветвляется на две, подобно дорожной развилке. Эти две цепочки могут ветвиться дальше – образуя сначала четыре, потом восемь и т. п. Если в нейронной сети много таких точек ветвления, она в принципе способна генерировать колоссальное количество последовательностей передачи возбуждения. Штука в том, что это возбуждение всегда должно в каждом конкретном случае «выбирать» одну, а не другую ветвь. Теоретики показали, что это можно проделывать при помощи нейронов-ингибиторов, которые специально включены в нейронную сеть так, чтобы заставлять ее ветви «конкурировать» друг с другом.
Второе, более фундаментальное замечание Лешли касается проблемы синтаксиса. Синаптическая цепочка использует межнейронные связи, чтобы отображать ассоциацию одной идеи со следующей идеей в данной последовательности. Лешли подчеркивал, что создание грамматически правильной фразы происходит не так просто, ибо «каждый слог в последовательности зависит не только от соседних слов, но и от более отдаленных». То, правилен ли будет конец фразы, может зависеть от взаимного расположения слов в самом ее начале. Концепция Лешли предвосхитила идеи лингвиста Ноама Хомского и его многочисленных последователей: они уделяют очень большое внимание проблеме синтаксиса.
Коннекционисты также пытались отвечать на второе возражение Лешли, хотя обсуждение этого вопроса лежит за рамками данной книги. Достаточно отметить, что ученые показали: коннекционизм вовсе не так ограничен, как полагали критики. Не думаю, что возможно отвергать какую бы то ни было доктрину, руководствуясь лишь теоретическими соображениями: ее необходимо проверять экспериментально. Для этого можно применить коннекциомику, я буду подробно говорить об этом позже.