применения подобного оружия делает его эффективным средством устрашения и подавления. Автономное оружие значительно снизит безопасность человека на всех уровнях: личном, местном, общенациональном и международном.
Это не значит, что автономные системы вооружений станут концом мира в духе фильмов о Терминаторе. Они необязательно должны быть особенно интеллектуальными — самоуправляемый автомобиль, пожалуй, должен быть умнее, — и их миссии будут не из разряда «поработить мир». Экзистенциальный риск, который несет ИИ, проистекает, прежде всего, не из простоватых роботов-убийц. С другой стороны, сверхинтеллектуальные машины в конфликте с человечеством, безусловно, могли бы вооружиться подобным образом, превратив относительно тупых роботов-убийц в физическое продолжение всемирной системы управления.
Уничтожение привычной нам работы
Тысячи статей в СМИ и авторских колонок, немало книг было посвящено роботам, отнимающим работу у людей. По всему миру возникают исследовательские центры, пытающиеся представить возможное развитие событий[158]. Названия книг Мартина Форда «Роботы наступают. Развитие технологий и будущее без работы»[159] и Калума Чейса «Экономическая сингулярность: искусственный интеллект и смерть капитализма»[160] неплохо характеризуют эти опасения. Хотя я, что скоро станет очевидно, никоим образом не являюсь экспертом в вопросе, относящемся к компетенции экономистов, мне он кажется слишком важным, чтобы всецело им доверять[161].
Внимание к вопросу технологической безработицы привлекла знаменитая статья Джона Мейнарда Кейнса «Экономические возможности для наших внуков». Она была написана в 1930 г., когда Великая депрессия привела к массовой безработице в Британии, но сама тема имеет значительно более долгую историю. Аристотель в первой книге «Политики» достаточно четко формулирует ее суть:
Если бы каждое орудие могло выполнять свойственную ему работу само, по данному ему приказанию или даже его предвосхищая… если бы ткацкие челноки сами ткали, а плектры сами играли на кифаре, тогда и зодчие не нуждались бы в работниках, и господам не нужны были бы рабы[162].
Каждый согласится с наблюдением Аристотеля, что, если работодатель находит механический метод выполнения работы, которую прежде делал человек, это приводит к немедленному сокращению трудовой занятости. Вопрос в том, будет ли оно впоследствии нивелировано так называемыми компенсационными эффектами, в целом способствующими росту занятости. Оптимисты отвечают утвердительно и в сегодняшних дебатах указывают на новые виды работы, возникшие со времен предшествующих промышленных революций. Пессимисты отвечают отрицательно и утверждают, что машины будут делать и «новую работу». Если машина заменяет физический труд человека, человек может продавать свои умственные способности. Если же машина заменяет и умственный труд, что еще он может продать?