Но верно и обратное. Во многом не имеет значения, насколько разумна машина, если она будет неспособна понять нас, а мы ее. Это одна из причин, почему нам стоит быть осторожными. Не потому, что машины могут обрести сознание, но потому, что мы будем создавать их для того, чтобы они контролировали системы. Важные для нас системы, необходимые для нашего мира и поддержания нашей жизни. По мере того как мы будем создавать все более умные и эффективные машины, мы неизбежно будем доверять им все больше задач и возлагать на них все большую ответственность – а иначе зачем их вообще создавать? Независимо от наличия у них сознания и свободы воли, все большая сложность будет означать, что процессы и логика их разума окажутся для нас недоступными. В результате что-то может пойти не так и в конце концов пойдет.

Также стоит обратить внимание на количество потенциальных разновидностей разума, которые могут появиться¹². Уже существуют разного рода машины, и у каждой свои возможности. Некоторые, как системы глубинного обучения, проявляют вполне узнаваемую, хотя и далекую от человеческой, степень разума. В то же время остальные абсолютно неразумны, хотя и демонстрируют подобие разума, то есть получая определенные данные на входе, дают самостоятельные и неслучайные данные на выходе.

Однако по мере прогресса будет ли это единственным отличием разума машин друг от друга? Мы уже давно поняли, что человеческий разум многогранен и разнообразен. Считается, что вариации общего интеллекта, или д, у людей, проходивших тестирование на определение уровня IQ, составляют от 40 до 60 %, но это лишь один аспект интеллекта в масштабах человечества. Признаки, которые могут или не могут быть уникальными аспектами интеллекта, включают в себя креативность, артистические способности, изобретательность, память, планирование, зрительно-пространственное ориентирование, кинестетическое восприятие, а также, несомненно, множество других. Кроме того, существует огромное множество аспектов отдельных личностей, из которых складывается наша уникальность: уверенность в себе, экстраверсия или интроверсия, эмпатия, паранойя, враждебность, стрессоустойчивость и т. д. Все эти компоненты составляют нашу особую ментальную картину. Наряду со всем этим в последние годы все больше получает признание EQ (эмоциональный интеллект), благодаря той роли, которую он играет в становлении успеха многих людей по всему миру¹³. Подробнее об этом позже.

Если все люди, сделанные из одного биологического материала – одни и те же инструкции ДНК, – так отличаются друг от друга, почему мы ждем от машин, что они будут одинаковыми? В частности, если они сделаны по разным схемам, чертежам и методам репликации, это приведет не только к возникновению новых особей, но и собственно новых видов. Как много вариантов возможно в этой области? Сотни? Тысячи? Миллионы? Речь идет не об индивидуальных особенностях личности, но скорее о чем-то близком к межвидовым различиям – психологической дистанции между шимпанзе и москитом. Между плоским червем и утконосом.