В этом мысленном эксперименте речь идет об изменениях того рода, к которым стремятся трансгуманисты и известные технологические лидеры вроде Илона Маска и Рэя Курцвейла[57]
. Хочу напомнить, что трансгуманисты намерены перепроектировать человеческий организм, мечтают о бессмертии и синтетическом разуме – и все это в стремлении повысить качество нашей жизни. Сторонников идеи о том, что людям следует слиться с ИИ, называют технооптимистами: они убеждены, что синтетическое сознание возможно. Кроме того, они считают возможным и слияние с ИИ. Если говорить конкретнее, они, как правило, предлагают следующую траекторию развития[58]:Обычный человек XXI в. → значительная «модернизация» при помощи когнитивных и других физических усовершенствований → статус постчеловека → «сверхразумный искин».
Назовем точку зрения, согласно которой человек должен двигаться по такой траектории и слиться в конечном итоге с искусственным интеллектом, «фьюжен-оптимизмом». Технооптимизм в отношении машинного сознания не требует обязательного фьюжен-оптимизма, хотя многие технооптимисты и правда симпатизируют этим взглядам. Но фьюжен-оптимизм нацелен на создание будущего, где пресловутые постлюди – самосознающие существа.
У этой примерной траектории есть множество вариаций. Так, одни трансгуманисты считают, что переход от неусовершенствованного человеческого интеллекта к сверхразуму будет стремительным, поскольку мы приближаемся к сингулярности – моменту, когда создание сверхчеловеческого интеллекта вызовет громадные изменения за очень короткий промежуток времени (например, за 30 лет)[59]
. Другие трансгуманисты утверждают, что технологические перемены не будут настолько внезапными. В этих дискуссиях часто обсуждается достоверность закона Мура[60]. Еще один ключевой вопрос – произойдет ли на самом деле переход к сверхразуму, ведь будущее технологическое развитие связано с серьезными рисками. Риски биотехнологий и ИИ касаются трансгуманистов и специалистов по биоэтике в целом в той же мере, что и биоконсерваторов[61].