Глава 17. Способы обнаружения однофакторных сценариев глобальной катастрофы

Проанализировав множество разных сценариев глобальных катастроф, мы можем выделить общие признаки таких сценариев, которые помогут нам в будущем обнаруживать или «конструировать» новые опасные сценарии.

17.1 Общие признаки любого опасного агента

По определению, в однофакторных сценариях всегда присутствует некий один фактор, который воздействует на всех людей. Об этом факторе можно сказать следующее: он зарождается в некой точке, распространяется по всей поверхности Земли и действует на каждого человека. Соответственно, различия могут быть в том, как он в этой точке возник, как он её покинул, как распространялся по Земле и как действовал на каждого человека. В каждом из этих пунктов есть несколько вариантов, в достаточной мере независимых друг от друга, что позволяет «конструировать сценарии», набирая разные цепочки из этих вариантов и приписывая им разную вероятность. Этот набор качеств может служить своего рода картой при проверке на безопасность каждой новой технологии или природного явления. А именно, мы должны проверять следующий набор свойств:

1. Может ли новая технология применяться для уничтожения людей или приводить к ней?

2. Если да, то каким образом она может выйти из-под контроля?

3. Может ли она распространиться по всей планете таким образом, чтобы воздействовать на каждого человека?

4. Может ли это произойти настолько быстро, что мы не успеем этому противостоять?

5. Как она может взаимодействовать с другими технологиями, усиливая при этом свой риск?

6. Насколько легко будет построить защиту от опасностей этой технологии?

7. Насколько точными и достоверными могут быть наши предсказания о рисках этой технологии?

8. Также особое внимание надо уделять закону, по которому распределена частота катастроф данного типа в зависимости от их силы. Если это степенное распределение с тяжёлым хвостом, то есть с показателем степени меньше 1 в формуле, то такие типы катастроф заслуживают пристального внимания. См. [Hanson 2008].

17.2 Способы возникновения

Опасный фактор, способный создать угрозу глобальной катастрофы, может возникнуть следующим образом:

1) Случайное природное возникновение. Например, подлёт астероида или извержение сверхвулканов.

2) Создание человеком. В этом случае, скорее всего, речь идёт о некой исследовательской лаборатории. Это создание может быть или случайным, или сознательным. Возможна и комбинация того и другого – когда нечто, что должно было иметь ограниченный радиус поражения (или вообще рассматривалось как безопасное и полезное), приобрело всемирный радиус поражения. (Примеры: африканские пчёлы-убийцы были выпущены на свободу в Южной Америке, по всей видимости, нарочно одним сотрудником лаборатории, но с ограниченными локальными целями; тем не менее эти пчёлы распространились по обоим Америкам и привели ко множеству смертей, что вряд ли входило в его планы[112]. Изначально ядерное оружие рассматривалось как оружие локального действия, однако потом возникли представления, что оно может угрожать всей земной цивилизации; ИИ, который запрограммирован быть дружественным и любить людей, может проявить такую «Дружественность», как «медвежья услуга».) Другой вариант состоит в том, что фактор постепенно создаётся в ходе деятельности всего человечества, как, например, накопление парниковых газов в атмосфере.

17.3 выход из точки и начало распространения

Очевидно, что это происходит или по команде некого человека, или случайно. Сразу следует сказать, что возможно совмещение этих сценариев: человек отдаёт некую команду, полный смысл которой не понимает, или она выполняется неправильно. Или некий человек со стороны совершает террористический акт, приводящий к разрушению лаборатории, в которой находится супервирус. Точка, в которой находится опасное изделие – это или лаборатория, где его создали, и тогда речь скорее идёт о случайном инциденте, или стартовая площадка, если эта технология превращена в некое изделии, которое стало оружием. Так же эта точка может быть где-то на пространственно-временном пути от лаборатории до стартовой площадки – на полигоне, на транспорте, на производстве. При этом важно отметить существенную разницу между мотивами того, кто создавал оружие судного дня, и того, кто затем решил его применить. Например, атомную бомбу создавали для защиты от иностранного агрессора, а террористы могут её захватить для требования отделения неких территорий. Такой двухфазовый целевой сценарий может быть вероятнее однофазового. Виды выхода из точки:

1. Утечка. Утечка начинается тихо и незаметно, без чьей-либо воли. Это относится к ситуациям, вроде утечки опасного вируса, которую нельзя заметить до того, как будут заболевшие снаружи. Утечка опасного химического вещества или ядерных материалов будет сразу заметна, и, скорее всего, будет сопровождаться взрывом.

2. Прорыв. Это силовой прорыв чего-то, что было заперто, но хотело вырваться наружу. Может относиться только к ИИ или генетически модифицированным живым существам с зачатками интеллекта.

3. Взрыв – катастрофический сценарий происходит в самой точке, распространяются его последствия. Скорее всего, это относится к опасным физическим экспериментам.

4. Запуск – кто-то принимает решение о распространении опасного агента или применении оружия судного дня.

5. Постепенное накопление. Как в случае генетической деградации, снижения биоразнообразия, исчерпания ресурсов.

Очевидно, что возможны некоторые комбинации этих базовых сценариев. Например, взрыв лаборатории, приводящий к утечке опасного вируса.

17.4 Распространение важнее разрушения

Анализируя любое явление или изобретение в качестве возможного фактора глобального риска, нам следует уделять больше внимания тому, может ли этот фактор за конечное время воздействовать на абсолютно всех людей, чем тому, может ли он убивать людей или нет. Для того чтобы некоторый фактор стал глобальным риском, есть два необходимых условия:

1) этот фактор убивает каждого человека, на которого воздействует;

2) он действует на всех людей на Земле за конечное время (за время, меньшее, чем способность людей к самовоспроизводству).

Однако если выполнения первого условия достичь относительно легко, так как существует бесконечное число способов причинения смерти, и они всё время на кого-то действуют, то второе условие – гораздо более редкое. Поэтому, как только мы обнаруживаем даже безобидный фактор, способный действовать на всех без исключения людей, это должно нас обеспокоить больше, чем обнаружение некого крайне опасного фактора, который действует только на некоторых. Потому что любой универсальный фактор может стать носителем для некого опасного воздействия. Например, как только мы осознаём, что Солнце освещает каждого человека на Земле, мы можем задаться вопросом – а не может ли с Солнцем случиться чего-то такого, что будет воздействовать на каждого? Это же касается атмосферы земли, её коры, и особенно космоса, который окружает всю Землю, а также глобальных информационных сетей.

17.5 Способ распространения

Именно способность к всемирному распространению делает оружие сверхоружием. Эта всемирность означает не только всю поверхность земного шара, но и способность проникать через все укрытия и средства защиты, а также скорость этого процесса, которая делает невозможным противостоять ему с помощью новых открытий. (Скажем, оледенение может быть всемирным, но, скорее всего, будет достаточно медленным, чтобы к нему можно было приспособиться.) Способы и факторы, влияющие на способность агента к распространению таковы:

1) Ветер в атмосфере; отдельно надо выделять быстрое движение верхних слоёв атмосферы (где скорости могут быть 100 м/с, а значит, время всемирного распространения – несколько дней), а также склонность вещества выпадать в необратимые осадки, что уменьшает его количество.

2) агенты, распространяющиеся своим ходом – бактерии, самонацеливающие нанороботы, самонаводящиеся ракеты.

3) от человека к человеку – вирусы.

4) с помощью специальных распылителей. Например, можно представить себе следующий катастрофический сценарий: на низкой полярной орбите летает спутник и непрерывно сбрасывает капсулы с радиоактивным веществом или другим опасным реагентом. За несколько дней он может пройти над всеми точками земного шара.

5) взрыв – сам создаёт огромное движение. Ударная волна помогает протолкнуть агент во все щели.

6) сетевое распространение. Так мог бы распространяться ИИ по Интернету.

7) смешанные способы. Например, на начальном этапе взрыв бомбы распыляет радиоактивные вещества, а потом их разносит ветром. Или некую плесень переносит ветер, а на местах она размножается. Понятно, что смешанные способы распространения гораздо опаснее.

8) агенты, обладающие элементами разума, чтобы обходить препятствия (компьютерные вирусы, ИИ, микророботы, агрессивные животные).

9) Внезапность и скрытность распространения помогает агенту проникнуть повсюду.

10) высокая способность к переносу, «липучесть» и мелкодисперсность (как у лунной пыли).

11) Способность саморазмножаться, как в природе, так и на человеке или на промежуточных носителях, а также способность воспроизводить себя, как например, при наведённой радиоактивности.

12) Многофакторность – если имеется достаточно много разнородных агентов, например, при мультипандемии.

13) Концентрация, как фактор распространения. Чем выше градиент концентрации, тем больше способность реагента проникать «во все щели». Иначе говоря, если концентрация в атмосфере составляет 1 смертельный уровень, то всегда найдутся участки, где из-за разных флюктуаций этот уровень будет значительно ниже, и люди там выживут, даже без всяких бункеров. Но если концентрация очень велика, то помогут только полностью герметичные, заранее оборудованные бункеры. Концентрация также увеличивает скорость распространения.

14) Длительность действия агента. Кратковременно действующий агент (гамма-всплеск) может опалить значительную часть биосферы, но всегда найдутся убежища, на которые он не подействовал. Однако длительное заражение, например, кобальтом-60, делает невозможным выживание в небольших убежищах.

15) Лёгкость фильтрации и дезактивации – чем легче фильтрация воздуха и дезактивация выходивших на поверхность людей, тем безопаснее агент. Биологические агенты можно было легко стерилизовать в системах вентиляции, но выходы на поверхность были бы исключены, так как человека не стерилизуешь.

17.6 Способ причинения смерти

Основной элемент глобальной катастрофы, который мы называем «агент», может вообще не убивать людей, а только разъединять их и лишать способности к размножению, как например, супернаркотик, или вирус, стерилизующий всех людей. Или загнать их всех в бункеры, где они обречены на деградацию.

Агент может быть однофакторным в смысле способа воздействия на человека – например, это может быть некая инфекция или радиация. При этом есть разница между мгновенной смертью и продолжительным умиранием.

Агент может обладать многофакторным поражающим воздействием, как атомная бомба. Однако должен быть главный фактор, обладающий универсальным действием на весь мир, или достаточная плотность разных факторов.

Агент может вызвать также не прямое действие, а равномерное разрушение всей среды обитания. (астероид, разрушение биосферы.)

Вымирание может также принять форму медленного вытеснения во второсортные экологические ниши (варианты: «зоопарк», тотальная безработица в духе статьи Билла Джоя «Почему мы не нужны будущему?» [Joy 2000]).

Разрушающий агент может вызвать появление новых агентов, каждый из которых действует по-своему. Например, распространение машины для программирования вирусов – био-синтезаторов (плюс вируса, или идеи-мема, вызывающего у некоторых людей желание уничтожить весь мир) могло бы стать таким суперагентом, вызывающих к жизни много разных агентов в разных частях Земли. В каком-то смысле сам научно-технический прогресс является таким суперагентом.

Агент может быть интеллектуальным, чтобы в каждом конкретном случае пользоваться разными способами: враждебный ИИ, эсхатологическая секта.

17.7 Типичные виды разрушающего воздействия

Чем бы ни был вызван «конец света», он будет воздействовать на людей и их бункеры, скорее всего, одним из нескольких перечисленных способов. Эти способы в основном совпадают с обычными поражающими факторами ядерного взрыва. Любой процесс, который способен одновременно создать хотя бы один из этих факторов на всей территории Земли, должен быть отнесён к «оружию судного дня»:

· Ударная волна – способна непосредственно причинять смерть, разрушать бункеры и все другие созданные человеком объекты.

· Высокая температура – от длительного воздействия высокой температуры почти нет защиты, так как любой бункер рано или поздно прогреется. Глубоко в землю зарыться не удастся, так как температура в шахтах быстро растёт, порядка 30 градусов на километр глубины.

· Холод. Ему противостоять проще, чем высокой температуре.

· Высокое давление.

· Летучее вещество.

· Излучение и радиация.

· Колебания земной поверхности.

· Утрата жизненно важного ресурса – кислорода, еды, воды.

· Поражение саморазмножающимся агентом (в каком-то смысле огонь тоже обладает способностью саморазмножаться).

· Сверхзвуковая ударная волна – возможно, при достаточно сильном ударе, она могла бы охватить значительную часть земной коры (хотя вязкость бы её поглощала).

Разница между очень большой катастрофой и окончательной глобальной катастрофой может быть в том, что в первом случае уцелеют хотя бы доли процентов людей и территорий. Поэтому важным признаком настоящей глобальной катастрофы является то, что она покрывает всю территорию земли без исключений. За счёт чего это происходит:

· Очень высокий уровень избыточности разрушающего воздействия.

· Разрушающий агент обладает своего рода «сверхтекучестью» по своей природе. Например, мелкодисперсная пыль, поверхностно активное вещество или насекомые, склонные заползать в любые щели.

· «Интеллект» той силы, которая направляет этот агент.

17.8 Временная структура события

Вне зависимости от того, как сложились предыдущие факторы, можно обозначить следующую последовательность событий во времени для однофакторной глобальной катастрофы:

1. Фаза назревания. Она включает в себя изобретение, создание, подготовку к применению и возникновение плана по применению. Если речь идёт о природном явлении, то речь идёт о накоплении энергии в камере супервулкана или о подлёте астероида. Сюда также входят накопление ошибок из-за халатности при исполнении инструкций и ошибки в составлении инструкций.

2. Момент спускового события. Это – одно событие в пространстве-времени, которое определяет начало всего процесса, который затем необратимо разворачивается в своём собственном темпе. Это может быть решение о ядерном ударе, трещина в крышке вулканической камеры и т д. Спусковое событие запускает цепочку событий, следующих друг за другом со значительной вероятностью в определённом временном графике. При этом если бы спусковое событие не произошло, то весь процесс мог бы отложиться на неопределённое долгое время. Однако само спусковое событие может быть внешне безобидным и никем не осознаваемым в качестве такового. Например, выстрел Гаврилы принципа в Сараево.

3. На этом этапе цепочка событий приводит к высвобождению опасного агента из точки его расположения. В этот пункт входят четыре варианта выхода «из точки», которые мы обсуждали выше: утечка, прорыв, взрыв, запуск.

4. На этой фазе происходит распространение агента по всей поверхности земли (а также в ближний космос, если уже есть самостоятельные космические поселения). Это распространение может быть: а) скрытным, б) сопровождающимся самим процессом разрушения. Скрытное может быть опаснее, так как не остаётся областей, которые успевают подготовиться.

5. Фаза уничтожающего процесса. Затем развивается сам процесс, охватывающий всю поверхность Земли. Эпидемия или ударная волна.

6. Точка необратимости. Процесс распространения обладает той или иной степенью неопределённости. Если процесс не мгновенный, то имеет место борьба людей с ним. Тот момент, когда люди проигрывают эту борьбу и вымирание становится неизбежно, и есть точка необратимости. Хотя она может не осознаваться в качестве таковой. Точка необратимости – это момент, когда факторы истребления превышают технологические возможности цивилизации, в том числе и потенции по улучшению этих технологий. Зависит как от концентрации факторов истребления, так и от уровня цивилизации. Если в результате крупной катастрофы уровень цивилизации упал ниже некой точки, а уровень факторов истребления поднялся выше неё, то дальше вымирание необратимо. С определённой вероятностью, разумеется.

7. Смерть последнего человека. После точки необратимости следует вымирание уцелевших людей. Этот процесс может растянуться во времени даже на многие годы за счёт бункеров. Он может представлять даже очень длительное состояние прозябания уцелевшего племени на неком острове. (Но у такого племени может быть шанс восстановить цивилизацию.)

8. Процессы «после». После смерти последнего человека процессы на Земле не завершатся. Возможно, начнут развиваться новые виды, возможно, земля будет заселена роботами, нанороботами и ИИ. Есть также надежда, что новый разумный вид воскресит человека по уцелевшей ДНК.

17.9 Предаварийные ситуации

Есть также разные типы общественных ситуаций, когда случайное или нарочное применение средства всеобщего уничтожения становится более вероятным.

1) война за объединение планеты.

2) борьба всех против всех за ресурсы в условиях их исчерпания.

3) нарастающая структурная деградация, по типу распада СССР.

4) техническая авария, утечка.

5) диверсия с целью уничтожения всех людей.

6) случайная война.

7) Шантаж машиной судного дня.

8) Неудачный эксперимент.

9) Мятеж с целью установления власти на Земле.

17.10 Намеренная и случайная глобальная катастрофа

Любые глобальные катастрофы можно различить по тому признаку, организованы ли они некой разумной силой, которая стремится устроить именно глобальную катастрофу, или это некий случайный процесс, у которого нет никаких целей. К первому варианту относятся глобальные катастрофы:

1) устроенные людьми;

2) связанные с ИИ;

3) происходящие по причине столкновения с иными нечеловеческими разумными силами.

Ко второму варианту: аварии, утечки, природные катастрофы, системные кризисы.

Интеграция первого и второго сценариев: возможен также сценарий, когда первая фаза катастрофы задумана людьми с определенными целями, однако затем процесс вырывается из-под контроля. Например, террористы могут сознательно спровоцировать ядерную войну, но не представлять себе её масштабов. Или некоторая буддистская секта может сознательно заразить всех людей вирусом счастья, но не учесть того, что такие люди будут в дальнейшем недееспособны. (Далай Лама недавно высказался в том духе, что неплохо было бы с помощью генетических манипуляций убрать у людей негативные эмоции.)

С другой стороны, победа разумной силы над людьми означает, что некоторая разумная сила в природе остаётся (если только она не кончает с собой после того), а, следовательно, окончательного исчезновения разума на Земле не происходит. И раз некий разум, причём превосходящий человеческий, остаётся, то он может и вернуть людей к жизни. Однако есть разумные силы, принципиально отличные от человеческого сознания, например, эволюция. Эволюция гораздо «умнее» человека (которого она породила), но бесконечно проигрывает по скорости. (Но не везде, например естественный отбор микроорганизмов, устойчивых к антибиотикам, происходит со скоростью, сопоставимой с разработкой новых антибиотиков.) Если один из вариантов будущего ИИ будет использовать принципы эволюции, но гораздо быстрее, то он может достичь «победы» над людьми как более эффективный решатель любых задач, однако при этом не быть сознающим существом в нашем понимании. Разработки такого ИИ небезуспешно ведутся в направлении, называемом «генетические алгоритмы».

17.11 Машина судного дня

Соберём в отдельную категорию все варианты «машины судного дня», которую может создать наиболее злонамеренная группа людей. Термин «машина судного дня» восходит к работам Германа Кана «О термоядерной войне»[113] и к фильму С. Кубрика «Доктор Стрейнджлав». Сюжет его вкратце таков: «Русские» создают «Машину судного дня», которая взрывает множество кобальтовых бомб, достаточное для полного заражения всего мира, в случае нападения на СССР. В ходе внутреннего конфликта в США мятежный сумасшедший генерал наносит удар по СССР, не зная о машине судного дня, в результате нападения машина запускается. Комментируя ситуацию, русский посол говорит: «И эту машину отключить нельзя, иначе бы в ней не было смысла». Др. Стрейнджлав задает логичный вопрос: «Но какой смысл было держать эту машину в секрете?» Русский посол отвечает: «Мы собирались объявить о ней в ближайший понедельник». То есть машина, которая должна была резко снизить риск какой-либо войны на Земле, в действительности приводит к её началу. Интересно, что Дж. Лесли пишет в своей книге «Конец света. Наука и этика человеческого вымирания», что на самом деле было бы неплохо такую машину иметь, так как если бы она правильно применялась, то могла бы снизить риск ядерной войны – примерно как сейчас это делает доктрина взаимного гарантированного уничтожения. Хотя основная идея машины состоит в той форме шантажа, которая подразумевает, что машина судного дня никогда не будет применена, сам факт её создания создаёт вероятность её применения. Такое устройство направленно не только против текущего противника в ядерной войне, но и против всех остальных стран, которые могли бы воспользоваться разрушением в ходе войны двух главных соперников и вырваться вперёд.

Кроме того, имеются исторические примеры бессмысленного истребления людей – обстрел гитлеровцами Лондона ракетами фау-2, затопление ими же метрополитена в Берлине вместе со своими же гражданами, поджигание нефтяных скважин в Кувейте. Психологический пример – подрыв себя гранатой при взятии в плен.

Отнюдь не любой вариант глобальной катастрофы годится как машина судного дня. Это должен быть процесс, который по решению некой группы людей может быть запущен в строго определённый момент времени и вести к глобальной катастрофе со значительной вероятностью, близкой к 100 %, по крайней мере, с точки зрения разработчиков устройства. Машина судного дня также должна быть неуязвима по отношению к попыткам предотвратить её применение, к несанкционированному применению и должна существовать возможность продемонстрировать реалистичность её применения, что нужно шантажистам. (Сейчас в качестве машины судного дня функционально выступает обладание хоть каким-то ядерным оружием, хотя одна атомная бомба весь мир не уничтожит. Например, такова сейчас роль ядерной бомбы в руках Северной Кореи – она хорошо спрятана, но наличие её продемонстрировано.) Вот, вероятно неполный, список возможных машин судного дня:

· Взрыв водородной бомбы

А) в супервулкане;

Б) в каменноугольном пласте;

В) в ядерном реакторе;

Г) в слое газовых гидратов в океане, с расчётом на цепную реакцию дегазации.

· Создание водородной сверхбомбы стационарного типа.

· Взрыв кобальтовых зарядов, запуск реактора-чёртовой трубки, производящего значительный выброс радиоактивных веществ без взрыва.

· Сведение астероида с орбиты.

· Накопление массы антиматерии.

· Проплавление коры Земли с помощью жидкого ядерного реактора по типу капли.

· Распыление спор антракса в атмосфере, высвобождение большого количества разных вирусов.

· Слив диоксина в океан.

· Выпускание генетически модифицированных производителей токсинов и вирусов («диоксиновая» плесень, чумная вошь).

· Распространение сотен миллиардов микророботов, атакующих всё живое.

· Уничтожение озонового слоя с помощью некоего катализатора.

· Сочетание всех этих факторов.