Как мы учимся. Почему мозг учится лучше, чем любая машина… пока

Явление блокировки – одно из самых эффектных опровержений ассоцианистской точки зрения²⁸⁶. В экспериментах с блокировкой животному предлагают два сенсорных ключа, предсказывающих скорое появление пищи: скажем, звон колокольчика и свет. Фокус в том, что они предъявляются последовательно. Мы начинаем со света: животное понимает, что всякий раз за зажиганием света следует появление пищи. После этого мы вводим двойные испытания, в которых пищу предсказывают и свет, и звон колокольчика. Наконец, мы проверяем действие одного колокольчика. Сюрприз: он не дает эффекта – вообще! Услышав звон, животное не выделяет слюну; оно, кажется, совершенно не замечает повторяющейся связи между колокольчиком и пищей. Что же произошло? Это открытие несовместимо с ассоцианизмом, зато отлично согласуется с теорией Рескорлы—Вагнера. Ключевая идея в том, что заучивание первой ассоциации (свет и пища) блокирует вторую (колокольчик и пища). Почему? Потому что прогноза, основанного только на свете, достаточно, чтобы объяснить все. Животное уже знает, что свет предсказывает пищу, а потому его мозг не генерирует никакой ошибки прогноза во время второй части теста, где о скором появлении пищи сигнализируют и свет, и звон. Ноль ошибок – ноль научения: собака не приобретает никаких знаний об ассоциации между звуком и едой. Какое бы правило ни было усвоено первым, оно блокирует усвоение второго.

Этот эксперимент с блокировкой ясно свидетельствует о том, что научение не работает по принципу ассоциаций. В конце концов, сочетание «звон колокольчика – пища» повторялось сотни раз, но условная реакция так и не сформировалась. Кроме того, эксперимент показывает, что в отсутствие удивления никакого научения не происходит: важнейшим условием научения является ошибка прогноза – по крайней мере у собак. Впрочем, имеющиеся на сегодняшний день данные говорят о том, что системы ошибок прогноза присутствуют в мозге всех видов животных.

Важно понимать, что сигнал ошибки, о котором мы говорим, – это внутренний сигнал, который распространяется в мозге. Нам не нужно совершать фактические ошибки, чтобы учиться; достаточно заметить несоответствие между тем, что мы ожидали, и тем, что получили в итоге. Рассмотрим простой двоичный выбор – скажем, какое второе имя Пабло Пикассо: Диего или Родриго? Предположим, мне посчастливилось высказать верную догадку с первой попытки (Диего; полное имя Пабло Пикассо – Пабло Диего Хосе Франсиско де Паула Хуан Непомусено Мария де лос Ремедиос Сиприано де ла Сантисима Тринидад Мартир Патрисио Руис и Пикассо). Научусь ли я чему-нибудь? Конечно. Даже при том, что я сразу ответил правильно, моя уверенность была низкой. Шансы, что я окажусь прав, составляли 50 на 50. Поскольку я не был уверен, полученная обратная связь дала мне новую информацию: она убедила меня, что мой случайно выбранный ответ на самом деле правильный на 100%. Согласно правилу Рескорлы—Вагнера, эта новая информация генерирует сигнал ошибки, который описывает разрыв между тем, что я предсказал (50%-ная вероятность оказаться правым), и тем, что я знаю теперь (100%-ная уверенность в знании правильного ответа). Распространяясь в моем мозге, сигнал ошибки уточняет мои знания, тем самым увеличивая мои шансы ответить «Диего» в следующий раз, когда меня об этом спросят. Следовательно, было бы неверно полагать, что для научения важно совершать много ошибок (хотя Шадоки, провалившие первые 999 999 запусков своей ракеты, едва ли с этим согласятся). Что действительно важно, так это получить эксплицитную обратную связь, которая позволит снизить неуверенность.

Нет удивления – нет научения; на сегодняшний день установлено, что этому базовому правилу следуют все организмы, включая маленьких детей. Как вы помните, удивление является одним из основных индикаторов ранних навыков ребенка: например, он гораздо дольше смотрит на предметы, нарушающие законы физики, арифметики, вероятностей или психологии (см. рисунок в главе 3, раздел «Понятие о физических объектах», а также цветную иллюстрацию 5). Но дети не просто с удивлением глазеют на происходящее: они явно учатся.