Вселенная. Емкие ответы на непостижимые вопросы

Итак, у нас появляются значимые новые инструменты. Посмотрите, что происходит с молодыми учеными, заканчивающими университеты вроде Массачусетского технологического, Стенфорда, Карнеги Меллона и Кембриджа – куда они идут? Они идут в эти новые стартапы ИИ. Наконец, если посмотреть на сообщество венчурного капитала, все инвестируют в машинное обучение, буквально сотни компаний. Мы и сами инвестировали в несколько десятков, купив только за прошлый год больше дюжины. Таким образом, инструменты, интеллект и инвестиции сигнализируют о больших переменах.

Я бы хотел подойти к размышлениям об этих вещах со своего рода подходом оценки рисков, разобраться, какие риски нас ожидают. Для этого я использую инструмент, называемый сценарное планирование. Это инструмент, которым я сам пользуюсь уже около 40 лет. Я возглавлял сценарное планирование в корпорации Шелл, где мы развивали этот инструмент, чтобы принимать важные решения в условиях неопределенности. Это инструмент для размышлений о неопределенности.

О рисках стоит задуматься, потому что мы уже видели, что они могут реализоваться. Подумайте: расшифровка генома, ядерное оружие, космическое оружие и, совсем недавно, CRISPR[18] – это области технологий, о которых в обществе были большие дискуссии и для которых разрабатывались стратегии управления значимыми рисками. Подобная дискуссия об искусственном интеллекте только началась, так не следует ли нам как-то ограничить его?

Чтобы продумать сценарии, необходимо понимать, каковы главные неопределенности и к чему они могут привести? Что наименее определенно и что будет иметь наибольшие последствия? Особенно важно, будет ли у нас достаточно времени на принятие решения, если последствия нам не понравятся? Успеем ли мы начать действовать или нас захлестнет переменами как в сингулярности – сценарии, предложенном Верноном Винджем и Рэйем Курцвайлем?

Итак, есть три категории рисков, о которых нам стоит подумать. Во-первых, те, которым мы уже подвергаемся – традиционные риски потери рабочих мест, которые сопровождают огромные технологические перемены, преображающие то, как выполняется работа, как работает промышленность, как работает общество. И это те опасения, которые испытывает сегодня большинство людей. Вторая категория рисков – это… позвольте мне назвать это некомпетентным ИИ или ИИ с неверными алгоритмами, как мы видели в «Одиссее 2001 года» – вы видели «Хал 9000», маниакально сосредоточенный на своей миссии и стремящийся убить всех людей вокруг себя, чтобы выполнить эту миссию. Я думаю об умном автомобиле, который в будущем скажет: «Нет, я не стану останавливаться у Макдоналдса, это вредно для вас». Я думаю как бы о дерзком роботе. И это вторая категория.

И третья, которая особенно страшна и беспокоит всех, – доминантный или злонамеренный ИИ. Сценарий Терминатора, если угодно. Я бы хотел провести различие между тем, что я называю большим ИИ, и малым, или ограниченным ИИ, как его иногда называют в отрасли. Ограниченный ИИ – это просто небольшие порции разума, применяемые сейчас почти в любом процессе, чтобы снять с человека рутинную работу. Простой пример, который многие сегодня используют, это покупка в один клик на Амазоне, так? Вы кликаете на выбранную книгу, и она моментально становится вашей, потому что одновременно маленький робот-клерк проверяет, человек ли это? Он действительно Шварц? Все ли в порядке с его кредитной картой? Верно ли указан его адрес? Да, мы можем завершить транзакцию. Немного ИИ. Или заселение в отель, когда ваш смартфон удостоверяет для отеля вашу личность и ИИ отвечает: «Добро пожаловать, мистер Шварц. Ваш номер – 905. Регистрироваться нет необходимости».

Как видно, в самых различных контекстах небольшое количество искусственного разума начинает применяться, чтобы убрать трение из тех или иных процессов. Вот это я имею в виду под ограниченным ИИ, и это уже начинает происходить. Не думаю, что ограниченный ИИ ведет нас к большому ИИ, а большой ИИ – это то, что в литературе называется общий искусственный интеллект, ОИИ (AGI). В целом, это как мозг человека, что-то сопоставимой мощности. И я думаю, что сложение маленьких ИИ не ведет к большому ОИИ.

В литературе также высказана идея искусственного суперинтеллекта, куда более мощного, чем человеческие существа, и требующего постоянного саморазвития. Машина улучшает себя и создает следующее поколение машины, которое создает следующее поколение машины и так далее и так далее, и машины становятся все лучше и оставляют нас далеко позади. Таким образом в этом зале мы говорим лишь о трех типах ИИ, хотя добрый друг многих из нас, Кевин Келли, только что выпустил отличную книгу «Неизбежно» (The Inevitable). И в этой книге он перечисляет 25 разных типов ИИ.