Новые темные века

Инженер «DeepDream» Александр Мордвинцев создал пробный вариант программы в два часа ночи, когда проснулся от кошмарного сна(31). Первым он загрузил в систему изображение котенка, сидящего на пне, а в результате получился страшный монстр: гибрид кота и собаки с множеством глаз и влажными носами вместо лап. Когда в 2012 году инженеры Google впервые прогнали 10 миллионов случайных видео на YouTube через необученную классифицирующую нейросеть, первой программа научилась видеть без подсказки кошачью морду – тотемное животное Интернета(32). Таким образом, Сеть Мордвинцева нафантазировала то, о чем привыкла думать, – кошек и собак. Дальнейшие итерации создали адские пейзажи, словно с полотен Босха: нескончаемая архитектура, арки, пагоды, мосты и башни в бесконечных фрактальных прогрессиях, в зависимости от активированных нейронов. Но есть одна константа, раз за разом повторяющаяся в творениях «DeepDream», – это изображение глаза: глаза собаки, глаза кошки, глаза человека; вездесущее око, наблюдающее за самой Сетью. Глаз, который парит в небе «DeepDream», напоминает всевидящее око антиутопической пропаганды – собственное бессознательное «мышление» Google, состоящее из наших воспоминаний и действий, обрабатываемых путем постоянного анализа и отслеживаемых для корпоративной прибыли и частного шпионажа. «DeepDream» по своей сути – параноидальная машина, потому что возникает из параноидального мира.

Между тем, когда программу не заставляют визуализировать свои сны, чтобы мы могли их увидеть, она продолжает неведомые нам изыскания.

Самым большим желанием Вальтера Беньямина в «Задаче переводчика» было получение «чистого языка», смеси всех языков. Именно этот обобщенный язык является инструментом переводчика, потому что раскрывает не смысл, а образ мышления оригинала. После активации нейронной Сети Google Translate в 2016 году исследователи поняли, что система способна создавать переводы не только в языковых парах, но охватывать все языки, то есть переводить, даже если никогда не видела прямого перевода с языка на язык. Например, Сеть, обученная на примерах в парах японский – английский и английский – корейский, способна генерировать японско-корейские переводы в обход английского языка(33). Это называется «нулевым» переводом и подразумевает наличие «межъязыкового» представления, то есть внутреннего метаязыка, включающего общие понятия на разных языках. Это, по сути, тот самый «чистый язык» Беньямина – бессмысленный метаязык программы. Визуализируя архитектуру Сети и ее векторы в виде цветных пятен и линий, можно увидеть сгруппированные вместе предложения на нескольких языках. Результатом является семантическое представление, которое Сеть развила самостоятельно, а не получила в готовом виде. Однако подробностей мы не узнаем; нам удалось подглядеть, что происходит в «пространстве бесконечного веселья», но попасть туда нам не суждено.

Более того, в 2016 году исследователи из Google Brain решили проверить, могут ли нейронные сети хранить секреты(34). В основе лежала идея соперничества, присущая проектированию нейронных сетей. Эта идея, несомненно, понравилась бы Фридриху Хайеку. И «AlphaGo», и генератор спальных комнат Facebook были обучены по принципу конкуренции, то есть состояли не из одного компонента, генерировавшего новые ходы или места, а из двух соревнующихся компонентов, которые постоянно пытались превзойти друг друга и таким образом совершенствовались.

Доводя идею конкуренции до логического завершения, исследователи создали три сети, названные в традициях криптографических экспериментов Алисой, Бобом и Евой. Перед ними стояла задача научиться шифровать информацию. Алиса и Боб знали ключ шифрования, который не был известен Еве. Алиса выполняла некоторую операцию со строкой текста, а затем отправляла ее Бобу и Еве. Если Боб мог расшифровать сообщение, оценка Алисы увеличивалась, но если то же удавалось Еве, счет Алисы уменьшался. За тысячи итераций Алиса и Боб научились общаться так, чтобы Ева не могла расшифровывать их сообщения. Они разработали частную форму шифрования, подобную той, которая используется сегодня в личной электронной переписке. Очень важно, что, как и в случае с другими рассмотренными нами нейронными сетями, принцип шифрования между Алисой и Бобом нам не понятен. Его работа скрыта в глубинных слоях Сети. То, что утаивалось от Евы, утаивается и от нас. Машины учатся хранить свои секреты.

Три закона робототехники Исаака Азимова, сформулированные в 1940-х годах, гласят:

1. Робот не может причинить вред человеку или своим бездействием допустить, чтобы человеку был причинен вред.