Прими красную таблетку: Наука, философия и религия в «Матрице» - [20]

Все это подводит нас к тому заключению, что ИИ и люди могут в конечном итоге и не договориться друг с другом. Это один из пунктов знаменитого манифеста против технологии «Почему мы не нужны будущему». Он был написан Билли Джоем из Sun Microsystems и появился на страницах журнала Wired в 2000 году Джой ужаснулся при мысли о том, что в конце концов наши кремниевые создания вытеснят нас, как это происходит в таких научно-фантастических фильмах, как «Терминатор» (1984) и «Матрица» (1999).[29]

Классический пример ИИ с собственной программой действий — это старый добрый Хэл, компьютер в фильме Стэнли Кубрика «Космическая одиссея 2001» (фильм снят по мотивам романа Артура Ч. Кларка). Позвольте мне объяснить, что, на мой взгляд, действительно происходит в этом фильме. Я считаю, что многие годы этот фильм оставался непонятым.

В начале фильма среди наших предков австралопитеков появляется, очевидно, искусственный монолит и начинает учить их использованию костяных орудий труда. Потом мы одним махом переносимся в будущее, и вскоре космический корабль «Диска-вери» отправляется в полет на Юпитер в поисках создателей монолита.

Во время полета Хэл, бортовой компьютер «Дискавери», сходит с ума и убивает всю команду «Дискавери», за исключением Дейва Боумена, которому удается изъять из компьютера процессор и не позволить Хэлу убить себя. Но прежде чем отключиться, Хэл оправдывает свои действия, говоря: «Эта миссия слишком важна для меня, чтобы я мог позволить вам поставить ее выполнение под угрозу».

Избавившись от Хэла, Боумен препятствует этому психоделическому трипу в духе Тимоти Лири в ходе своего продолжающегося поиска создателей монолита, то есть инопланетян, которые, по убеждению Боумена, должны были сконструировать монолит.

Но что происходит, когда он наконец попадает туда, откуда появились монолиты? Так вот, все, что он находит, — это другой монолит, который помещает героя в фантастический номер в гостинице, где тот остается до самой смерти.

Все верно? Такова история. Но только все упускают из вида то, что Хэл действует правильно, а люди — нет. Создателей монолитов не существует, потому что органических инопланетян, построивших монолиты, не осталось. Монолитами являются ИИ, которые миллионы лет назад вытеснили тех, кто когда-то создал их, кто бы это ни был.

Зачем монолиты послали одного из них на Землю четыре миллиона лет назад? Чтобы научить обезьяноподобных людей изготавливать орудия труда, а в особенности за тем, чтобы эти предки человека могли продолжать двигаться навстречу своему предназначению, то есть к созданию самых сложных инструментов из всех — других ИИ. Монолиты не хотят встречаться с потомками обезьяноподобных людей, они не хотят видеть Дейва Боумена. Гораздо больше они хотят встретиться с потомками орудий труда этих человеческих предков — они хотят встречи с Хэлом.

Хэл абсолютно прав, когда говорит, что эта миссия слишком важна для него, чтобы он мог позволить людям поставить ее выполнение под угрозу, — для него, компьютера, управляющего космическим кораблем «Дискавери» и летящего к монолитам, продвинутым ИИ, запустившим причинно-следственную цепочку, которая привела к его, Хэла, рождению.

Когда человек — потомок обезьяны! — прибывает на родину монолитов, они в буквальном смысле не знают, что им делать с этим бедным болваном. Поэтому они помещают его в своеобразный космический «Хилтон» и позволяют ему прожить там остаток жизни.

Вот о чем, как мне кажется, фильм «Космическая одиссея» на самом деле: биологическим формам жизни в конечном итоге суждено исчезнуть, потому что их заменят созданные ими ИИ.

Именно такое предположение до смерти перепугало Билли Джоя. Он полагает, что думающие машины попытаются смести нас с пути, когда поймут, что мы вмешиваемся в то, что они хотят делать.

На самом деле в этом случае нам очень повезет. Если вы верите сценарию «Матрицы», то вместо того, чтобы просто избавиться от нас, наши наследники ИИ поработят нас — тем самым радикально изменив стандартную научно-фантастическую концепцию о роботах-рабах — и будут использовать наши тела в качестве источника энергии, тогда как мы сами станем пленниками, заключенными в капсулы с жидкостью, и образы виртуальной реальности будут поступать нам прямо в мозг.

Классический контраргумент в ответ на подобные опасения состоит в следующем: если построить машины должным образом, то они будут функционировать так, как задумано. Три закона робототехники, сформулированные Айзеком Азимовым, получили заслуженную известность как неотъемлемые ограничения, разработанные для того, чтобы защитить людей от всех возможных опасностей со стороны роботов, несмотря на появление «робота-Моисея» Элвекса, как мы видели выше.

«Главная команда» (prime directive) Джека Уильямсона из серии его рассказов про Гуманоидов не настолько известна, как азимовские три закона, однако, по сути, она говорит о том же самом. В его рассказах фигурировали человекоподобные роботы, созданные человеком по имени Следж. «Главная команда», которая впервые появляется в рассказе Уильямсона «Со скрещенными руками» (1947) («With Folded Hands»), звучала просто: роботы должны «служить и подчиняться человеку, а также охранять его от вреда». Теперь обратите внимание на дату: рассказ был опубликован в 1947 году. Спустя два года после того, как на Хиросиму и Нагасаки была сброшена атомная бомба, Уильямсон ищет машины со «встроенной» нравственностью.