От прошлого к будущему, тогда, вероятный рисунок приближающейся способности выглядит примерно так. На протяжение целых временных эпох, жизнь продвигалась вперёд растянутым во времени, медленным темпом, который определялся эволюцией генов. Разум с языком подхватили темп, ускоренный гибкостью мимов. Изобретение методов науки и технологии ещё ускорило продвижение, заставив мимы эволюционировать быстрее. Рост богатства, образования и населения – лучшие физические и интеллектуальные инструменты, продолжили эту тенденцию ускорения на протяжение нашего века.
Автоматизация разработки ускорит темп еще больше. Автоматизированное проектирование улучшится, помогая людям-инженерам генерировать и проверять идеи быстрее, чем когда-либо. Преемники EURISKO сократят сроки проектирования, предлагая проекты и заполняя детали инноваций, вносимых человеком. С какого-то момента полностью автоматизированные системы проектирования станут двигаться вперёд сами по себе.
Параллельно, молекулярная технология разовьется и вызреет, чему будут помогать продвижения в автоматизированном проектировании. Тогда системы ИИ, построенные ассемблерами, дадут еще более стремительное автоматизированную разработку, развивая технологические идеи в темпе, устанавливаемом системами в миллион раз более быстрыми, чем человеческий мозг. Скорость продвижения технологии вперёд тогда ускорится огромнейшим скачком вперёд: за короткое время многие области технологии пододвинутся к своим ограничениям, установленным законом природы. Тогда продвижение в этих областях остановится на очень высоком уровне достижений.
Эта трансформация – головокружительная перспектива. За ней, если мы выживем, лежит мир воспроизводящихся ассемблеров, способных делать всё, что им говорят делать, без необходимости в человеческом труде. За ней, если мы выживем, лежит мир с системами автоматизированного проектирования, способными направить ассемблеры создавать устройства, на пределе возможного, близко к конечным границам технического совершенства.
В конечном счете, некоторые ИИ системы будут иметь и большие технические способности и социальные способности, необходимые, чтобы понимать человеческую речь и желания. Если ей дать достаточно энергии, материалов и ассемблеров, такая система могла бы вероятно называться "машиной-джином" Она произведёт всё, что вы просите, арабская сказка и "О чем вы просите, это произведет, Аравийская легенда и универсальный здравый смысл подсказывают, чтобы мы воспринимали опасности таких машин создания действительно очень серьезно.
Появление решающих крупных достижений в техническом и социальном ИИ займёт годы. Как сказал Марвин Мински, "умеренно "умеренноинтеллектуальные машины ближайшего будущего обещают только давать нам богатство и комфорт неустанных, послушных и недорогих слуг." Большинство систем, называемых ИИ, не думают и не учатся, они являются только грубой выжимкой из знаний и умений экспертов, сохраненных, упакованных и распространяемых для консультаций.
Но прибудет и подлинный ИИ. Удерживать его вне наших ожиданий означало бы жить в мире фантазии. Ожидать ИИ – ни оптимистично, ни пессимистично: как всегда, оптимизм исследователей – пессимизм технофоба. Если мы не готовимся к их прибытию, системы социального ИИ могли бы поставить серьёзную угрозу: подумайте об ущербе, причиняемом всего лишь человеческим интеллектом террористов и демагогов. Подобным образом системы технического ИИ могли бы дестабилизировать мировой баланс в военной сфере, давая одной стороне неожиданное и огромное преимущество. С надлежащей подготовкой, однако, искусственный интеллект мог бы помочь нам строить будущее, которое работает – для Земли, для людей, и для продвижения интеллекта во вселенную. Глава 12 подсказывает подход как часть более общего вопроса управления трансформацией, которую принесут ассемблеры и ИИ.
Зачем нужно обсуждать опасности сегодня? Потому что уже не слишком рано начать разрабатывать институты, способные иметь дело с такими вопросами. Технический ИИ появляется сегодня и каждое его продвижение вперёд ускорит гонку технологий. Искусственный интеллект – всего лишь одна из многих мощных технологий, которыми мы должны научиться управлять, каждая из которых добавляет что-то к сложной смеси угроз и возможностей.
Глава 6. МИР ВНЕ ЗЕМЛИ
Ту перевернутую чашу мы зовём Небом; под ним, в кишащем курятнике мы бы жили и умирали.