Может существовать множество самых разных причин, по которым ИИ в конечном итоге так и не получит внутренних переживаний. Например, все ваши осознанные переживания, похоже, связаны с тем или иным сенсорным содержанием – ароматом утреннего кофе, теплом летнего солнца, звуками саксофона. Именно сенсорное содержание оживляет и расцвечивает ваши осознанные переживания. Согласно последним веяниям в нейробиологии, сознание включает в себя обработку сенсорных данных в «горячей зоне» в задней части мозга[35]
[36]. Хотя далеко не все, что рождается в наших головах, связано с сенсорным восприятием, вполне вероятно, что определенный базовый уровень сенсорной осознанности является обязательным предварительным условием обладания сознанием, чистых интеллектуальных способностей для этого недостаточно. Если обработка в «горячей зоне» действительно ключ к сознанию, то сознанием в принципе могут обладать только существа с сенсорной искрой. Высокоинтеллектуальные, даже сверхразумные искины, возможно, просто не будут иметь сознательного наполнения из-за отсутствия «горячей зоны» в архитектуре или ее более низкого «разрешения», как у низкокачественных mp3-файлов.Если следовать этой линии рассуждений, то сознание вовсе не является обязательным продуктом интеллекта. Насколько нам известно, компьютроний размером с галактику Млечный Путь вполне может не иметь даже намека на внутренние переживания. Сравните это с внутренним миром мурлыкающей кошки или собаки, бегающей по пляжу. Даже если задача создания искина, обладающего сознанием, принципиально разрешима, она может потребовать целенаправленных усилий. Возможно, здесь не обойтись и без гениального мастера, этакого Микеланджело разума.
Теперь рассмотрим процесс ваяния разума подробнее. Нам следует обдумать несколько инженерных сценариев.
Проектирование сознания: кошмары из сферы связи с общественностью
Я уже отмечала, что вопрос о том, есть ли у искинов внутренняя жизнь, занимает центральное место в наших представлениях о ценности их существования. Сознание – философский краеугольный камень нашей морали, поскольку это ключ к определению того, является ли что-то или кто-то индивидуальностью или личностью и заслуживает ли особого морально-нравственного отношения. Мы уже говорили, что в настоящее время создаются роботы, которые должны будут заботиться о престарелых в Японии, дезактивировать ядерные реакторы и воевать за нас. Однако использование роботов на таких работах, возможно, будет неэтичным, если окажется, что они обладают сознанием.
Сейчас, когда я пишу эту книгу, полно публикаций на тему прав роботов, то и дело проводятся научные конференции. Google-поиск по ключевым словам «права роботов» выдает более 120 000 результатов[37]
. Учитывая такой интерес, можно не сомневаться, что, если кто-то попытается вывести на рынок систему, обладающую сознанием, он вполне может столкнуться с обвинениями в рабовладении и эксплуатации роботов и с требованиями запретить использование осознающих себя искинов для выполнения тех самых задач, для которых они были созданы. В самом деле, ИИ-компаниям с большой вероятностью придется принять особые этические и законодательные обязательства, стоит им создать хотя бы прототип машины, обладающей сознанием. А выключение навсегда или «ограничение» сознания, т. е. перезагрузка ИИ-системы со значительным сокращением или полным устранением сознания, возможно, будет рассматриваться как преступление. И вполне справедливо.Такие соображения могут заставить ИИ-компании вообще воздержаться от создания самосознающих машин. Мы не хотим вступать на скользкую с этической точки зрения почву уничтожения самосознающих искинов или даже остановки их программ на неопределенное время. Полное представление о машинном сознании может помочь нам избежать подобных этических кошмаров. Разработчики ИИ могут, посовещавшись со специалистами по этике, принять целенаправленные конструкторские решения и позаботиться о том, чтобы их машины не получили сознания.
Проектирование сознания: безопасность ИИ
До сих пор мой рассказ о проектировании сознания был сосредоточен в основном на причинах, по которым разработчики ИИ могут воздержаться от создания самосознающих искинов. Но что, если подойти к проблеме с другой стороны? Существуют ли причины, по которым разработчики все же могут попытаться наделить искинов сознанием, если, конечно, это не противоречит законам природы? Возможно.