У искусственных агентов расчеты выполняются посредством равенства; животные же для этой цели используют клетки, синапсы, контуры и молекулы своих нервных систем. Главной действующей силой этого нервного расчета ценности является дофамин; когда он попадает к нейронам, формирующим ассоциации между стимулами или между стимулами и реакциями, эти связи усиливаются. Такое влияние дофамина на расчет значения связан не с удовольствием, а, скорее, с корректировкой клеточных реакций нейронов. Удовольствие, когда оно имеет место, является соотносительным понятием, но преимущественно не причиной научения.
У некоторых организмов – в том числе, конечно, у людей – удовольствие способствует подкреплению научения, однако на основе нашего внутреннего опыта нельзя делать обобщений в отношении поведения организмов, внутренний опыт которых для нас непознаваем, особенно если достаточно объяснения с точки зрения бессознательного. Кент Берридж и Мортен Крингельбах, ведущие исследователи-гедонисты, считают, что нервные обоснования поведенческой деятельности, которые обычно используют для определения гедонистических состояний у животных, отражают те простые и незаменимые для выживания механизмы, которые, возможно, выработались задолго до тех дополнительных, благодаря которым у людей появились осознанные чувства. Другими словами, контролирующие поведение гедонистические состояния являются фундаментальными и бессознательными. Как мы увидим впоследствии, у некоторых организмов эти бессознательные состояния могут быть повторно представлены когнитивными системами таким образом, что воспринимаются как осознанные. Правда, я не думаю, что именно такие осознанные чувства обусловливают поведенческую гибкость.
Вопреки расхожему мнению, я считаю, что поведенческая гибкость возникла вследствие эволюции новой когнитивной способности, а именно использования внутренних представлений в связке с инструментальным научением. Способность рассуждать позволила использовать сохраненные в памяти ценности целей, достигнутых в прошлом, для управления поведением в настоящем, причем по-новому и с большей силой.
Часть X
Выживание (и процветание) за счет мышления
Глава 45
Размышление
В наборе поведенческих инструментов животных с появлением способности использовать внутренние представления вместе с инструментальным научением произошли существенные изменения. Благодаря этой способности у его обладателей обозначился новый талант: они могли основывать свои текущие реакции на воспоминаниях о последствиях успешного научения путем проб и ошибок в прошлом. Но представьте, что животное с такой способностью попадает в ситуацию, которая никогда раньше с ним не происходила, – ему остается только заново учиться, пробуя и совершая ошибки, но, когда на кону его жизнь или благополучие, совершение беспорядочных, непроверенных действий в надежде, что такая тактика себя оправдает, скорее всего, приведет к обратному результату, а последствия и вовсе могут оказаться фатальными. В определенный момент эволюционной истории млекопитающих у них появилась возможность вести внутренние размышления[60]
(таблица 45.1).Размышление дает возможность предвидеть возможные результаты действий, использовать для их оценки практические знания, хранящиеся в памяти, и выбирать те, которые с большей вероятностью приведут к полезному результату. Кроме того, в ходе размышления разрозненные части информации за несколько шагов могут быть объединены и быстро привести к решению. Если для научения новой реакции методом проб и ошибок требуются множество повторений и подкрепление на основе результата, на внутреннюю симуляцию потенциально возможных результатов всех доступных вариантов действий уходит всего мгновение.
Разберем на примере: допустим, медведь загнал вас на берег реки. Раньше вы в такой ситуации никогда не были, и инструментальной реакции у вас не возникнет, однако практическое мышление, основанное на общих знаниях о ситуациях такого рода, позволит сформировать новую гипотезу о том, как лучше всего поступить. Возможно, вы вспомните, как в прошлом вам удавалось убегать от других опасностей и переносить эти знания на ситуацию, в которой вы оказались, а может быть, вы вспомните, что медведи тоже хорошо бегают, и бегство не лучший выход в данном случае. Затем вы сравните варианты, уплыть или залезть на дерево, и выберете тот, который, по вашему мнению, с большей вероятностью приведет к желаемому результату.