Искусственный ты. Машинный интеллект и будущее нашего разума

Другой пример – смерть разума придуманного компьютера HAL 9000 в фильме «2001: Космическая одиссея». HAL ни внешне, ни по разговору не похож на человека (HAL разговаривает человеческим голосом, но совершенно безынтонационно). Тем не менее содержание того, что говорит HAL, когда один из астронавтов собирается отключить его, – умоляет не «убивать» его, – создает полное впечатление, что HAL – самосознающее создание, субъективно переживающее все, что с ним происходит.

Могут ли такие модели поведения помочь нам на Земле в распознавании искинов, обладающих сознанием? Здесь возникает одно препятствие. В программу даже сегодняшних роботов можно заложить убедительные высказывания о сознании, а высокоинтеллектуальная машина сумеет, наверное, использовать в своих целях информацию из области нейробиологии, доказывающую наличие сознания у биологических существ. Может быть, искин решит, что его задача будет выполнена наилучшим образом, если люди причислят его к мыслящим созданиям и удостоят особого морального отношения. Если перед продвинутыми не сознающими себя искинами будет стоять цель обмануть нас и заставить поверить, что они обладают сознанием, то знания о человеческом сознании и нейробиологии поможет им в этом.

Однако я считаю, что мы в состоянии обойти эту проблему. Один из предлагаемых методов обеспечения безопасности ИИ предусматривает «изоляцию» искина – создание условий, при которых он не будет получать информацию об окружающем мире или действовать вне предписанных рамок. Можно закрыть искину доступ в интернет и не позволять ему получать слишком много знаний об окружающем мире, особенно информации о сознании и нейробиологии. ACT-тест подходит для использования на этапе исследований и разработок, где искин в любом случае необходимо испытывать в безопасной искусственной среде.

Если какая-нибудь машина пройдет ACT-тест, можно сделать следующий шаг и измерить другие параметры системы, чтобы понять, с чем связано наличие сознания: с повышенной эмпатией, непредсказуемостью, целеустремленностью, более развитым интеллектом и т. д. Другие, лишенные сознания варианты той же системы послужат базой для сравнения.

Некоторые сомневаются, что сверхразумную систему можно будет эффективно изолировать от внешнего мира, поскольку она, мол, неизбежно отыщет лазейку. Однако мы с Тёрнером не ожидаем появления сверхразума в ближайшие десятилетия и просто предлагаем метод тестирования на наличие сознания для некоторых типов ИИ. Более того, для эффективности ACT-теста нет нужды изолировать искина надолго, вполне достаточно небольшого промежутка времени. Поэтому не исключено, что этот тест можно будет применять и к некоторым сверхразумным искинам.

Еще один повод для тревоги связан с тем, что для эффективной изоляции искина его словарь не должен содержать таких выражений, как «сознание», «душа» и «разум». Поскольку, если высокоинтеллектуальный искин получит информацию по этим словам, он, вполне возможно, сумеет сгенерировать ответы, которые мы воспримем как свидетельство наличия сознания. Не имея этих слов в словаре, искин будет не в состоянии показать нам, что он сознает себя. Здесь важно помнить, что дети, животные и даже взрослые люди способны демонстрировать сознание, не зная значения этих слов и выражений. Кроме того, в лингвистической версии ACT-теста могут присутствовать вопросы или сценарии, ни в одном из которых не используются соответствующие слова. (Удовлетворительного ответа хотя бы на один из следующих вопросов или сценариев достаточно, чтобы пройти тест.)

Примерные вопросы ACT-теста