8). Опасность непредвиденных чрезвычайных ситуаций. Новые технологии создают дополнительные риски для безопасности и надежности. Относительно бедные и технически неразвитые страны вполне могут пользоваться ИИ по модели SAAS, т. е. «сервис, как услуга». Это может привести к крупномасштабным катастрофам и инцидентам в развивающихся государствах. Что касается Соединенных Штатов, то здесь возникает другая опасность. Поскольку в Интернете все связано со всем, то, несомненно, будут связаны друг с другом и ИИ. Уже сегодня специалисты не вполне понимают ход вычислений, который приводит к тем или иным выводам. Завтра же массовое внедрение ИИ может создать сверхсложную среду, где люди будут неспособны принимать оптимальные решения и раз за разом ошибаться.
Период неопределенности
Возрастающую технологическую неопределенность порождает комбинация возможностей, рисков и угроз в изменчивой, турбулентной политической, экономической и технологической среде. В обществе существует высокая степень обеспокоенности по поводу последствий использования ИИ, особенно в значительной степени в засекреченной сфере национальной безопасности. В процессе работы Комиссия не раз встречалась с мнениями руководителей бизнеса и правительственных организаций, ведущих исследователей относительно рисков негативного воздействия ИИ на общество, экономику и правопорядок. Комиссия указывает следующие риски.
1. Многие эксперты в области обороны призывают Соединенные Штаты как можно быстрее поставить на вооружение LAWS с управлением ИИ. По их мнению, это позволит Соединенным Штатам оставаться конкурентоспособными в конфликтах с государствами, уже эксплуатирующими LAWS с поддержкой ИИ, а также спасти жизни американцев и сократить жертвы среди гражданского населения. В то же время представители гражданского общества и многие разработчики призывают Соединенные Штаты отказаться от LAWS с поддержкой ИИ, полагая, что в противном случае Америка развяжет гонку киберфизических вооружений, управляемых ИИ, которая может привести к катастрофическим последствиям. Некоторые технические работники, обеспокоенные, что их усилия в части развития ИИ могут быть использованы в военных целях, призвали своих работодателей ограничить сотрудничество с Министерством обороны, а желательно прекратить его вообще. В то же время военные, а также руководители технологических компаний указывают, что важнейшим преимуществом Китая перед Соединёнными Штатами является участие абсолютно всех команд и коллективов разработчиков ИИ в реализации общенациональной программы военного использования ИИ. По их мнению, отказ тех или иных американских специалистов и групп от сотрудничества с Министерством обороны в области ИИ является прямым пособничеством противнику.
2. Технологические фирмы создают комитеты по этике для разработки руководящих принципов работы в области ИИ и Интернета вещей, а также предлагают на законодательном уровне запретить правительству США иметь дело со странами, которые используют ИИ для угнетения своих граждан. Значительная часть американских военных, руководителей технологических компаний выступают за более активное, вплоть до принятия законодательных актов, противодействие Соединенных Штатов китайскому цифровому авторитаризму, который давно уже вышел за пределы Китая и становится, по их мнению, угрозой для всего человечества.
3. Компании и университеты подчеркивают, что изоляционизм и замыкание исключительно на внутренних проблемах США создает стратегическую угрозу, прежде всего, для самих Соединённых Штатов. Технологический бизнес однозначно высказывается за широкое международное сотрудничество, за более активное привлечение талантов и высококвалифицированных специалистов в Соединенные Штаты. Сотрудники национальной безопасности и правоохранительных органов подчеркивают, что новый американский изоляционизм успешно используется Китаем, максимально широко привлекающим компьютерные таланты со всего мира и стремительно развивающим международное сотрудничество в области ИИ.
Альтернативное видение будущего
Прогноз Комиссии носит не столько аналитический, сколько нормативный характер. Комиссия описывает будущее таким, каким бы хотелось его видеть, и которое наверняка таким не будет.