Angst

А теперь представьте: приложение начинает говорить вам, что такое хорошо, а что такое плохо. Ваш образ жизни начинает влиять на рейтинг. Вот, что заявил технологический директор Zhima Credit Ли Ин-Юнь: «Если кто-то, например, по 10 часов в день играет в видеоигры, то он – бездельник, а если человек часто покупает подгузники, то, скорее всего, он – родитель, а значит, в целом обладает чувством ответственности». А финансовый директор Люси Пен и вовсе сказала: «Мы сделаем так, чтобы плохим членам общества было некуда пойти, а добропорядочные граждане могли передвигаться свободно и без ограничений». Приложение начинает диктовать людям, что делать. Вот только за любым алгоритмом стоит человек, и, видимо, именно он будет решать, кто плохой член общества, а кто – нет. В данном случае роль большого брата играет китайское правительство. Zhima Credit – часть масштабной программы Компартии по созданию «механизма социального кредита», которая реализуется с 2014 года. Власти Поднебесной намерены присвоить похожие рейтинги каждому гражданину до 2020 года. Это очень удобный инструмент контроля общества, который Оруэллу даже не снился. Ведешь себя как законопослушный гражданин: платишь налоги, лоялен к власти – и с твоим рейтингом будет все в порядке. Попадешь в немилость – и твоя жизнь превратится в ад. Забудь про соцобеспечение и билеты на самолет. Твой удел – только самые дешевые поезда и койка в придорожном мотеле. Ведь теперь ты – человек третьего сорта. Это не мои фантазии, это история оппозиционного журналиста Лю Ху, про которого в своей статье рассказала Мара Хвистендаль. Социальная инженерия во всем своем великолепии. Партия мягко, но настойчиво говорит: «Думай так, как нужно нам. Делай то, что хотим мы». И это не будущее и не строчки из романа-антиутопии. Это наше настоящее. А нейросети и искусственный интеллект позволят еще больше упростить контроль над нашими действиями. Да и над нашими мыслями. И слова террориста-фанатика уже не кажутся такими уж безумными, правда?

День завтрашний

В конце своего манифеста Унабомбер предрек два сценария развития цивилизации. Первый основывается на том, что мы сохраним власть над искусственным интеллектом: он станет нашим цепным псом. Однако очевидно, что этот пес будет служить не абстрактному человечеству, а вполне себе конкретным хозяевам: армии, чиновникам или корпорациям. И глупо полагать, что они будут использовать его для достижения общечеловеческих идеалов, вроде мира во всем мире и всеобщего равенства. Скорее всего, все это приведет к еще более сильному расслоению: мы получим верховную касту, которая сделает себя с помощью технологий неприкасаемой. Она сможет полностью подчинить себе всё человечество или группу людей на отдельно взятом куске земли. Мы получим новых богов, всемогущих и всевидящих. А боги всегда отличались мстительностью и своенравием, а не милосердием и состраданием. В таком случае книжка Оруэлла покажется лишь безобидной детской сказкой.

Второй путь тоже не самый радужный. Мы вступим в схватку с искусственным интеллектом и проиграем. Проиграем, потому что будем медленнее и глупее. Уже сейчас машины справляются со многими задачами лучше нас. Они быстрее считают, быстрее реагируют. А все совершенствующиеся нейросети скоро будут использоваться практически везде. По оценкам консалтинговой компании McKinsey, к 2036 году будет автоматизировано до 50% рабочих процессов. В новом дивном мире человек станет ненужным: он как организм, как биологическая машина просто устареет. Давайте признаем, человечество уже тихо порабощается разумными машинами. Мы уже несвободны. Ведь говоря о свободе, мы имеем в виду не только приватность, но и независимость. А мы уже зависим от машин, которые со многими вещами справляются лучше нас. Это, как я уже говорил, просто удобно. И в усложняющемся мире эта зависимость будет только расти. И нам не останется ничего иного, кроме как отдаться на волю машин. Мы просто не сможем выключить их, потому что «их отключение будет равносильно самоубийству». Не будет никакого Судного дня: мы сами принесем свою свободу в жертву прогрессу. И новым князем мира сего станет интеллект искусственный.