• в-третьих, так или иначе, это определение может быть развернуто с добавлением определенных свойств в терминологию, используемую в настоящее время министерством обороны США, ООН, Международным Комитетом Красного Креста и т. п.
Представляется, что данное определение позволит разработчикам, планировщикам, администраторам и военным говорить на одном языке. С технической точки зрения данное определение позволяет выделить основные направления развития автономии в военном деле. К ним относятся:
• автономные системы оружия, которые после своей активации действуют на всех фазах боевого цикла самостоятельно, без участия человека-оператора, и даже человека-контролера;
• системы автономного оружия, предполагающие контроль оператора. В этих системах участие оператора сводится лишь к возможности отменить миссию, обеспечив автономный возврат на места дислокации или принять решение об уничтожении автономного оружия;
• полуавтономные оружейные системы. В этом типе систем человек остается участником "петли управления и контроля" и выполняет те или иные функции в дополнительном или параллельном по отношению к программно-аппаратному блоку режиме. Человек может в силу каких-либо обстоятельств взять управление оружием на себя и т. п.
Необходимо отдавать себе отчет, что повышение уровня автономности одновременно может способствовать росту эффективности и жизнеспособности систем оружия и повышать риски его избыточного или нецелевого применения. Два эти процесса пока идут параллельно, и разделить их не удается.
Возможно, могут быть предложены и другие подходы к определению автономности оружия. Однако данный подход представляется наиболее оправданным не только с точки зрения его больших описательных возможностей, но и поскольку он анализирует оружие с единственно правильной точки зрения. А именно, с точки зрения человека-оператора и контролера.
Представляется, что в будущем даже при наличии технических возможностей создания полностью автономных военных систем в строгом, формальном смысле слова, надо много раз подумать и еще больше раз поэкспериментировать, прежде чем ставить такие системы на вооружение. С ростом интеллектуальности автономных систем и повышением их огневой и иной поражающей мощи, параллельно возрастают риски не только утраты контроля, но и вообще способности человека управлять и контролировать подобными системами.
Уже сегодня в вооруженных силах США применяются программно-аппаратные комплексы для анализа и прогнозирования, которые человек не контролирует. Т. е., он, конечно, контролирует их работу, именно человек пишет программу, но строго говоря, не только непосредственные потребители – военные, но и возможно разработчики и программисты не могут проконтролировать правильность рекомендаций, анализов и прогнозов, полученных аппаратно-программным комплексом. Уже сегодня в определенных случаях военные становятся заложниками компьютерных вычислений.
Представляется, что определение, базирующееся на здравом смысле и опирающееся на анализ распределения участия человека и автомата в решениях и действиях на разных фазах боевого цикла – от обнаружения цели до ее поражения, позволяет уйти от "мутных тем" искусственного интеллекта, человеко-машинного разума и свободы воли роботов. Оставим их писателям-фантастам, философам, психологам и т. п., а вместо этого сосредоточимся на конкретной работе, связанной с автономным оружием.
Выводы
Стремительное развитие информационных технологий означает, что возможности, сегодня кажущиеся труднореализуемыми, либо невероятными, завтра станут обыденностью и будут воплощены в конкретных системах, аппаратах, решениях и механизмах. Мы не думаем, что процесс развития информационных технологий является полностью управляемым. Более того, мы не думаем, что можно даже, понимая ту или иную опасность, остановить динамику. Например, всем понятны опасности, связанные с постоянно повышающейся автономностью в сочетании с ростом интеллектуальности вооружений. На эту тему очень много рассуждают различного рода активисты и политики. Они, вероятно, правы в своих опасениях. Но эта правота ничего не меняет. Каждая из потенциально враждебных сторон будет резонно полагать, что противоположная сторона стремится обеспечить свое преимуществ. Соответственно она не будет верить, что противоположная сторона займет сдержанную позицию по отношению к автономии интеллектуальных систем оружия. В итоге гонка в автономии, интеллектуальности и живучести вооружений неостановима до тех пор, пока будут иметься хотя бы две не доверяющие друг другу стороны.
Этот материал нацелен на выработку общего понимания автономии. Слишком часто в прошлом те или иные политические и административные решения принимались в нашей стране, за рубежом и в международном масштабе без понимания сути дела. Отдавая отчет в долговременной тенденции повышения автономности роботизированных систем, в том числе в военном деле, мы, с учетом этой тенденции и должны принимать различного рода законодательные и административные акты, формировать бюджет. Если они не будут соответствовать тенденции, при всех благих намерениях они не будут выполняться.
Видя опасность повышения автономности, интеллектуальности и живучести систем вооружений, мы должны отдавать себе отчет, что эти тенденции имеют и свою положительную сторону. Например, они позволяют резко снизить потери в вооруженных силах Соединенных Штатов, позволяют при использовании высокоточного оружия на порядки уменьшить жертвы среди гражданского населения в зонах вооруженных столкновений и конфликтов.
Общей тенденцией эволюции систем вооружений в будущем будет их нарастающая автономия, все более активный переход от полуавтономных БАРС и АРС различных типов к автономным системам и полностью автономным системам в формальном смысле. Целесообразно, прежде всего, отработать автономные системы, не несущие на себе летального оружия, а связанные с разведкой, транспортировкой, логистикой и применением нелетального оружия. Наработав опыт в этой сфере и приучив к такого рода системам общественное мнение, а главное, сделав их привычными для солдат и офицеров, можно переходить к следующей стадии – к БАРСам.
Мы полагаем, что в ближайшем будущем на вооружении США и их союзников и партнеров будут находиться в основном полуавтономные, а также небоевые АРС. Что касается врагов и противников Америки, то в ближайшем будущем их технологические возможности вряд ли позволят создать эффективные БАРС. Однако такой риск тем не менее сохраняется вследствие исчезновения барьеров между гражданским и военным секторами технологий, бизнеса и т. п. Поскольку враги, в том числе, негосударственные акторы, потенциально могут купить, получить или создать БАРС, уже сегодня Соединенные Штаты, их союзники и партнеры должны заранее сосредоточить усилия на создании БАРС, действующих исключительно против БАРСов противника.
Сосредоточившись на теме автономии вооружений, важно не забывать и о других характеристиках. Эти характеристики в определенных условиях могут быть не менее, а даже более важными, чем автономность.
Например, статическая система автономного оружия, расположенная вдоль границы страны, будет гораздо более уязвима, чем автономная мобильная система. Хорошо известно, что в годы Холодной войны самым страшным оружием Советов были неуловимые поезда, несущие на себе стратегические ракеты, запускаемые непосредственно с колесных платформ. В отличие от легко обнаруживаемых стратегических сил США, расположенных либо в шахтах, либо на подводных лодках, Соединенные Штаты до последних дней существования СССР не знали, где и когда может быть нанесен удар этими подвижными железнодорожными монстрами, не распознававшимися со спутников, для которых они выглядели также, как составы с песком или коровами.
Точно так же, как динамичность, огромное значение может иметь и среда использования автономного оружия. Например, автономные боевые системы, рассчитанные на поражение в подводной среде, как правило, на порядок дешевле подобных систем для сухопутной и даже воздушной среды. Дело в том, что для сухопутной и воздушной сред больших затрат требует создание средств тонкого распознавания с тем, чтобы по ошибке или необоснованно не атаковать мирную цель и не нанести потери гражданскому населению. В случае подводного оружия такой задачи нет.
Наконец, ключевым параметром является поражающая мощь. Даже школьнику понятно, что риски использования автономного роботизированного бомбардировщика с атомными крылатыми ракетами на борту на тысячи порядков выше, чем риск применения самонаводящегося, полностью роботизированного пулемета. Соответственно автономия должна рассматриваться вместе с другими важнейшими характеристиками оружия. Только комплексное рассмотрение позволит профессионально говорить о возможностях и рисках.
В настоящее время 30 стран используют в своих вооруженных силах автономные и полуавтономные системы. Во всех этих системах на сегодняшний день человек находится в "петле управления", выполняя, по крайней мере, функцию контролера. Кроме того, пока автономные военные системы используются в основном для разведки, транспортировки и логистики, а также позиционной обороны. Даже в случаях логистики и транспортировки, в основном эти системы применяются для перемещения и складирования грузов, боеприпасов и т. п., а не людей. Возможно, самым главным является тот факт, что во всех 30 странах пока люди не только выполняют функции контролера, но и во всех случаях имеют возможность вручную отключить систему в случае сбоя и т. п.
Однако принимая во внимание ускоряющиеся темпы развития систем робототехники, информационных и когнитивных технологий, возрастающую международную напряженность и неустойчивость мировой динамики, с высокой степенью вероятности можно прогнозировать, что будущее не будет линейным продолжением прошлого. Уже в ближайшем будущем кто-то из государственных или негосударственных акторов неизбежно перейдет зыбкую границу между автономными системами (с человеком-контролером и ликвидатором) и автономными системами в формальном смысле (без человека-контролера и ликвидатора, где человек выполняет только функцию активатора оружия). Более того, нельзя быть уверенным, что эта зыбкая граница уже кем-то где-то и когда-то не перейдена.
Бесспорно, необходимо вести публичные и закрытые дискуссии среди военных профессионалов, ученых, инженеров, юристов, специалистов по этике и активистов. Однако при ведении подобных дискуссий не надо обольщаться и считать, что их выводы и итоги могут что-либо изменить в контексте динамики автономии, интеллектуальности и живучести роботизированных и иных автоматических систем как в гражданской, так и особенно в военной сферах. Эти дискуссии важны для понимания, но совершенно бессмысленны, как способ ограничения развития. В нашем разделенном мире никакое соглашение относительно ограничений технического прогресса не будет выполняться. Всегда найдется тот, кто в силу обстоятельств, умысла или по любознательности нарушит любые соглашения. В этом смысле более оправдана позиция, исходящая из динамичности научно-технического прогресса и независимости его направленности и динамики от наших желаний, соглашений или опасений.
Роботы на поле боя. Центр Новой Американской Безопасности 2014 г. Извлечения из доклада
Введение. Революция в вооружениях
Вооружения, инфраструктуры и методы ведения войн непрерывно меняются. Нации должны адаптироваться к переменам, иначе они рискуют потерпеть поражение на поле боя. Исход войн определяют, конечно же, люди. Но качество и продвинутость вооружений в истории зачастую играли и играют решающую роль. Никакая масса солдат не сможет преодолеть отсутствие у армии, например, пулеметов. Какой бы у армии не был высокий боевой дух, он не защитит от безжалостных авиационных атак с использованием оружия массового поражения.
Высокий уровень боеготовности и мощи вооруженных сил зависит не только от используемых технологий и инноваций, но и от других факторов: качества управления, ресурсной обеспеченности, культурно-образовательного уровня и т. п. Иногда эти факторы при приблизительном равенстве в используемых вооружениях могут сыграть определяющую роль. Сегодня, как никогда ранее, технологические факторы переплетены с институциональными, культурными и поведенческими. Новые технологии меняют лицо войны и Соединенные Штаты должны опережающим образом адаптироваться к этим изменениям.
В глобальной среде безопасности четко проявляется несколько тенденций. Так или иначе, они ведут к эрозии традиционных американских военных преимуществ. Прежде всего, все более широко по миру распространяются мощные вооружения и средства их доставки, в том числе в виде ракет разного радиуса действия. Одновременно, не только государства, но и негосударственные акторы имеют доступ к новым высокоточным вооружениям, а также миниатюрным минам, бомбам, боеприпасам, которые могут быть доставлены на место взрыва не только отдельными людьми, но и микроподлодками, микродронами и т. п. Становятся все более доступными различного рода технологии, имеющие двойное назначение. Практически все современные информационные технологии являются технологиями двойного назначения и могут быть использованы в военной сфере злонамеренными государствами, негосударственными группами и индивидуумами против Америки. Дополнительные возможности для создания разрушительных, но при этом миниатюрных вооружений создает появление принципиально новых, в том числе композитных, материалов, 3D печать, подлинный бум робототехники, который охватил не только ведущие технологические страны мира, но и страны с невысоким уровнем развития. Все это создает принципиально новые угрозы овладения мощными разрушительными вооружениями злонамеренными государствами, негосударственными группами и индивидуумами.
Поскольку в высокотехнологическом мире больше нет разделения на гражданские и военные технологии, глобальные потоки технологий и их открытость действуют в сторону выравнивания возможностей обладания разрушительными вооружениями не только между государствами, но даже и между государственными и негосударственными акторами.
Дополнительный импульс этому дает становящаяся на наших глазах глобальной система телекоммуникаций, опирающаяся, прежде всего, на интернет и гаджеты типа мобильных телефонов. В этой среде любой сложный вирус, типа Stuxnet, а тем более боевые программы, рассчитанные непосредственно на поражение боевой техники и гражданских инфраструктур по своей смертоносности не отличаются от оружия массового поражения. В военном деле появился принципиально новый феномен. Речь идет о так называемых вооружениях с открытым кодом. Сегодня значительная часть программного кода, необходимого для создания мощных боевых платформ и эксплойтов, устройств 3D печати и Боевых Автономных Роботизированных Систем (БАРС) находится в свободном доступе и является своего рода опенсорсной средой разработки вооружений.
В результате такие факторы, как численность населения, объем ВВП, масштаб военных расходов, которые в прошлом в значительной мере определяли соотношения между различными странами, с каждым годом теряют свое решающее значение. При наличии опенсорсной среды разработки, позволяющей создать боевые компьютерные программы, различного рода БАРСы, вызов сильным державам могут бросить не только злонамеренные и маргинальные государства, но и группы националистических хакеров и киберпреступников, а также иррегулярные формирования и сети транснациональной преступности. Более того, уже сегодня не является фантастикой, когда угрозу Америке могут создать несколько или даже один индивидуум, закупивший рой полностью автономных дронов и оснастивший их обычными сельскохозяйственными устройствами для разбрызгивания удобрений. Но вместо удобрений будут использоваться вещества, произведенные при помощи поражающих биотехнологий, которые могут иметь генную маркировку и предназначаться для летального воздействия не на все население, а лишь на людей, обладающих определенными генами и т. п.
Сегодня все эти тренды уже привели к широкому распространению возможности производства смертоносных вооружений не только государствами, но и малыми группами. Это создает принципиально новые угрозы не только для американских вооруженных сил за пределами страны, но и для населения на территории Америки. Сегодня Соединенные Штаты расходуют все больше средств на создание системы тотального наблюдения, разведки и оповещения о возможности производства на территории Соединенных Штатов или доставки в страну принципиально новых видов вооружений, сочетающих миниатюризацию с разрушительными эффектами. Пора понять, что тотальное наблюдение – это не прихоть АНБ и не стремление ограничить гражданские права и свободы, а печальная и неотвратимая необходимость в борьбе с принципиально новыми типами угроз для Америки.
В противовес ожиданиям информационная революция не остановилась на совершенствовании систем коммуникаций и обработки информации для людей. Вслед за "интернетом людей" появился "интернет вещей", затем интернет, встроенный в человека. Сегодня мы уже живем в мире "интернета всего". Но и это не завершение революции. На наших глазах происходят перемены, возможно более значительные, чем появление первых станков. Речь идет о робототехнической революции, которая охватывает промышленность, другие сферы экономики, быт и повседневную жизнь и, конечно же, в первую очередь, военное дело. Победителем в этой технологической гонке станет не тот, кто затратил больше всего ресурсов в сфере робототехники, и даже не тот, кто производит лучших роботов, поскольку эти технологии неизбежно становятся известны всем, а тот, кто лучше всех сможет использовать робототехнику для решения стоящих разнородных военных задач. Надо помнить: робототехника – это инструмент. А эффективность любого инструмента зависит не только и не столько от собственного совершенства, сколько от навыков и понимания возможностей его использования людьми.
Соединенные Штаты использовали и используют тысячи воздушных и наземных роботов в Ираке и Афганистане. Они занимались, прежде всего, наблюдением, распознаванием, разведкой и в последнее время выполняли работу саперов и обезвреживали взрывные устройства. Однако надо признаться, что такое использование демонстрирует непонимание военного потенциала робототехники. Пока роботы выполняют лишь незначительную часть работ, которые они способны делать.
Впрочем, в этом нет ничего неожиданного. Например, уже в ходе Первой мировой войны имелись возможности использовать авиацию для бомбардировки наземных войск и городов противника. Однако понадобилось больше 20 лет, чтобы этот потенциал был полностью востребован в ходе Второй мировой войны.