Я, робот

— Тогда слушайте. Каждое действие любого ответственного лица, не согласующееся с рекомендациями Машины, становится ей известно и учитывается при решении очередной проблемы. Машине, таким образом, становится известна склонность данного лица к неповиновению. Машина может даже количественно оценить последствия этого, то есть предвидеть, в какой степени и в каком направлении ее рекомендации будут нарушены. И последующий ответ Машины будет, естественно, скорректирован таким образом, чтобы непослушание данного исполнителя автоматически привело к оптимальным результатам. Машина знает, Стивен!

— Но вы не можете быть в этом уверены. Это просто ваша догадка.

— Догадка, не спорю, но основана она на многолетнем опыте работы с роботами. И будет лучше, если вы положитесь на эту догадку, Стивен!

— Но что же тогда получается? С Машинами, как и с вводимыми в них данными, все в порядке. Не слушаться их, как вы говорите, тоже невозможно. Но что же тогда не в порядке?

— Вы сами ответили на свой вопрос. Все в порядке. Задумайтесь немного о самих Машинах, Стивен. Они роботы и повинуются Первому Закону. Но Машина призвана заботиться не об отдельном человеке, а обо всем человечестве. Следовательно, для них Первый Закон должен звучать так: «Ни одна Машина не может причинить вред человечеству или своим бездействием допустить, чтобы человечеству был причинен вред». Отлично. А теперь, Стивен, давайте зададим себе вопрос: какой вред может быть причинен человечеству? Что ему грозит? Больше всего — нарушения баланса в экономике, по какой бы то ни было причине. Не так ли?

— Так.

— А из-за чего могут возникнуть самые большие нарушения баланса в экономике, Стивен? Попробуйте ответить.

— Ну… — неохотно начал Стивен, — пожалуй, из-за разрушения Машин. Я бы так сказал.

— И я бы так сказала. Именно так и должны отвечать себе на этот вопрос сами Машины. Их первейшей задачей, стало быть, становится самосохранение, но ради нас. Именно поэтому они незаметно взяли под контроль тех людей, которые могли бы им угрожать. Вовсе не Общество защиты прав человека раскачивает лодку, чтобы в конце концов добиться демонтажа Машин. Вы смотрели на обратную сторону картины. Гораздо правильней будет сказать, что это сами Машины раскачивают лодку — не сильно, ровно настолько, чтобы стряхнуть за борт тех, кто преследует цели, которые Машинам представляются опасными для человечества. Итак: Врасайяна остался без завода и получил другую работу, где он не может причинить вреда. Он не очень пострадал, он не лишился средств к существованию, ведь Машина в принципе не может нанести человеку вред, разве что самый минимальный, и то — в интересах всего человечества. Концерн «Циннабар» утрачивает контроль над альмаденскими рудниками. Виллафранка уволен с поста главного инженера строительства канала. А директора «Всемирной сталелитейной» уже утрачивают руководящие позиции в промышленности — и очень скоро потеряют их совсем.

— Но вы же ничего этого не знаете наверняка, — упорствовал Байерли. — Разве можем мы рисковать и действовать на основе одних только предположений?

— Не только можете, но и должны. Помните тот ответ, который дала сама Машина на ваш запрос? Он звучал так: «Суть дела не подлежит объяснению». Правильно? Ведь Машина не сказала, что объяснения нет или что она не может его найти. Она просто не собиралась ничего объяснять. Никому. Другими словами, она решила, что знать суть дела человечеству не нужно и опасно. Поэтому нам остается одно: положиться на свои догадки.

— Но какой же вред был бы в том, чтобы Машина все нам объяснила? Конечно, если допустить, что вы правы.

— Если я права, то это значит, что Машина продумывает за нас наше будущее не только в плане выдачи корректных ответов на корректно заданные вопросы, но также принимает стратегические для развития человечества решения и учитывает человеческую психологию. Знание об этом может сделать нас несчастными и ранить нашу гордость, а этого Машина допустить не может. Она не должна делать нас несчастными. И потом, Стивен, разве мы можем знать, что для человечества хорошо, а что плохо? В нашем распоряжении нет и крупицы всех тех данных, которыми располагает Машина! Ну, вот известный пример: разве развитие нашей технической цивилизации не принесло больше горя и страданий, чем были им уничтожены? Очень может быть, что примитивная аграрная цивилизация, с более низким уровнем культуры и меньшей численностью населения, была бы предпочтительнее. Кто знает? Если это так, то именно в таком направлении Машины будут нас подталкивать, ни в коем случае не сообщая нам об этом, потому что мы невежественны, мы заражены предрассудками, мы считаем благом только то, к чему привыкли. С любыми переменами мы тут же начнем отчаянную борьбу. А может быть, для человечества лучше полная урбанизация, или кастовое сообщество, или абсолютная анархия. Мы этого не знаем. Знают только Машины, и они двигаются в этом направлении, ведя нас за собой.