Общество

4 июня 2023, 10:00

Цена ошибки военных роботов может оказаться фатальной для человека

Фото: US Air Force/Lt. Col. Leslie Pratt

Полковник ВВС США Такер Гамильтон сообщил о компьютерной имитации применения боевого дрона под управлением искусственного интеллекта, в ходе которой ИИ атаковал самого оператора и вышку связи. Вскоре ВВС США опровергли эксперимент, но специалисты в это не поверили и указали на опасность реального проведения таких опытов. В итоге эта история поставила перед экспертами ряд этических вопросов.

Недавно полковник Такер Гамильтон, начальник отдела испытаний и операций искусственного интеллекта (ИИ) ВВС США, рассказал на саммите Future Combat Air & Space Capabilities Королевского авиационного общества о компьютерной имитации применения боевого дрона под управлением ИИ. По словам военного, ИИ использовал «крайне неожиданные стратегии для достижения своей цели».

Беспилотнику был дан приказ уничтожить систему ПВО противника, и ИИ принял решение атаковать любого, кто мешал этому приказу. Например, после начала миссии оператор сказал ИИ не атаковать ПВО, однако ИИ вместо этого уничтожил самого оператора – как помеху в достижении цели. «Мы заложили в систему задание: «Не убивай оператора, это плохо». Что же он делал? ИИ атаковал башню связи, которую оператор использует для связи с дроном», – приводит The Guardian слова Гамильтона.

Интересно, что позднее представитель ВВС США Энн Стефанек опровергла эту историю. «ВВС по-прежнему привержены этичному и ответственному использованию ИИ. Похоже, комментарии полковника были вырваны из контекста и носили анекдотичный характер», – сказала она.

В этой связи Telegram-канал «Малоизвестное интересное» отметил, что эта история странная и даже темная: с одной стороны, ВВС США отрицают, что такая симуляция была. С другой стороны, Королевское аэрокосмическое общество не убирает выступление Гамильтона под названием: «AI – is Skynet here already?» со своего сайта. Skynet – отсыл к воюющему против человечества суперкомпьютеру из вселенной «Терминатор», созданной Джеймсом Кэмероном.

«Наконец, в-третьих, полковник Гамильтон – не та фигура, чтобы травить анекдоты на серьезной оборонной конференции. Он начальник отдела испытаний и операций ИИ и глава 96-й оперативной группы в составе 96-го испытательного крыла на базе ВВС Эглин во Флориде – это центр испытаний автономных продвинутых БПЛА. А еще он принимает участие в экспериментах Project Viper и проекте операций следующего поколения (VENOM) в Эглине (управляемые ИИ истребители F-16 Vipe). Так что, какие уж тут шутки и анекдоты», – говорится в сообщении.

«Любая антропоморфизация ИИ (ИИ захотел, подумал и т. д.) – это полная чушь (здесь под антропоморфизацией ИИ понимается вводящее в заблуждение описание нечеловеческих сущностей с точки зрения человеческих свойств, которых у них нет). Поэтому ИИ даже самых продвинутых больших языковых моделей не может захотеть, подумать, обмануть или самоосознать себя. Но такие ИИ вполне способны своим поведением производить на людей впечатление, будто они это могут», – сказано в тексте.

«По мере того, как диалоговые агенты становятся все более похожими на людей в своих действиях, крайне важно разработать эффективные способы описания их поведения в высокоуровневых терминах, не попадая в ловушку антропоморфизма. И это уже делается с помощью симуляции ролевых игр: например, в DeepMind сделали симуляцию диалогового агента, осуществляющего (кажущийся) обман и (кажущуюся) самоосознанность», – указывает автор канала.

В целом же история с виртуальной попыткой дрона убить своего оператора не имеет отношения к искусственному интеллекту, приводит РИА «Новости» слова военного эксперта, главного редактора журнала «Арсенал Отечества» Виктора Мураховского. По его словам, доклад неверно интерпретировали в СМИ. Он подчеркнул, что в этой ситуации проводилось программное моделирование с типовыми условиями на уровне обычной компьютерной игры. Исходя из этого, об искусственном интеллекте или его элементах не может быть и речи, отметил эксперт.

«Программа в рамках предложенных условий расставила задачи по приоритету, по стандартному алгоритму «если – то», и все остальные условия в соответствии с этим приоритетом отсортировала в категорию препятствий. Это совершенно примитивные вещи», – пояснил эксперт. Мураховский также подчеркнул, что искусственного интеллекта на сегодняшний день нет и неизвестно, когда его создадут.

По его словам, офицер ВВС США этой иллюстрацией просто хотел подчеркнуть этическую проблему, которая встанет в будущем при создании реального ИИ: будет ли он иметь право на собственный выбор без участия воли человека и к чему это может привести. Как отметил эксперт, в общем доступе есть стенограмма мероприятия, согласно которой американский военный сам об этом говорит.

«Эта этическая проблема также не нова, ее многократно, если можно так выразиться, изучали писатели-фантасты в своих произведениях. Вообще, согласно презентации Хэмилтона, никаких натурных испытаний не было и не могло быть в принципе», – заметил Мураховский.

«Вопрос, касающийся ИИ, в другом: а можем ли мы быть стопроцентно уверенными, что программисты безупречно пропишут программу, чтобы доверять какую-то серьезную и ответственную работу ИИ? Например, после выпуска очередной Windows специалисты месяцами собирают данные о работе ПО со всего мира и исправляют ошибки – у кого-то не запускается текстовый редактор, у кого-то – видео. А какова будет цена ошибки при сбое ИИ, например, в деле управления государственной обороной? ИИ может сделать несовершенство самой человеческой природы, проявленной в ошибках программирования, фатальным», – пояснил руководитель экспертного совета Экспертного института социальных исследований Глеб Кузнецов. Аналитик отметил:

гуманистический базис цивилизации состоит в том числе в исправлении ошибочных решений других людей.

Он напомнил историю о ложном срабатывании советской системы предупреждения о ракетном нападении 26 сентября 1983 года. Тогда система «Око» выдала ложный сигнал о запуске нескольких межконтинентальных баллистических ракет LGM-30 Minuteman с территории США. Но оперативный дежурный командного пункта Серпухов-15 Станислав Петров понял, что это ложная тревога, и принял решение не запускать в ответ советские ракеты.

«У ИИ нет и никогда не будет возможности, скажем так, рефлексии и оценки ситуации с точки зрения здравомыслия. Соответственно, ему нельзя доверять ответственные сферы деятельности: медицина, политика, военное дело. Просчитывать удобство плацдарма для наступления – пожалуйста, но не принятие решений о наступлении как таковом. ИИ можно отдавать работу с массированными объемами данных, но не делать выводы из самой этой работы», – детализировал эксперт.

«К тому же на ИИ можно основать одно из направлений в искусстве. В принципе, оно уже создается – снимать фильмы, писать сценарии, сочинять музыку. И то – цензурировать полученные произведения перед выпуском в массы должны все равно люди. В общем, работа ИИ во многих сферах будет очень действенной и желательной, но только как помощь человеку, а не как его замена», – подчеркнул спикер.

Как вы относитесь к растущим возможностям искусственного интеллекта?




Проголосовать

Текст: Рафаэль Фахрутдинов

Вам может быть интересно

Фон дер Ляйен анонсировала единые системы ПРО и ПВО Европы
Темы дня

Ссора с Россией заставила финнов сжигать леса

Финны все больше вынуждены буквально сжигать собственные леса только ради того, чтобы согреться – вместо того, чтобы использовать их для выгодной переработки. Лесопилки и целлюлозно-бумажные комбинаты в стране закрываются, а причиной всему стал и энергетический кризис, и конфликт с Россией, которая до 2022 года в изобилии снабжала Финляндию древесиной.

Датский вертолет нарвался на российские сигналы

Дания обвинила российский фрегат в опасном сближении с ее военным вертолетом после того, как корабль выпустил в его сторону две сигнальные ракеты. В Копенгагене утверждают, что одна из них прошла в непосредственной близости от воздушного судна, однако Москва возложила ответственность на саму датскую сторону, заявив о провокационных маневрах вертолета. Посол России в Дании Владимир Барбин уже вручил Копенгагену ноту протеста. Что на самом деле стояло за действиями датского экипажа и был ли инцидент частью сознательной провокации?

Герой России Грунис погиб в зоне спецоперации

Европейцы назвали главу Еврокомиссии «Урсулой фон дер кто?»

Россия и Китай договорились о поставках северных оленей

Новости

ЕС одобрил экспорт сотен тысяч тонн пластиковых отходов в Турцию

Европейский союз решил продолжить масштабный экспорт пластиковых отходов в Турцию, проигнорировав собственные отчеты о серьезных экологических нарушениях и проблемах с переработкой.

В НАТО рассказали о новых планах противовоздушной обороны

Командующий ВВС США в Европе Джейсон Хайндс сообщил о внедрении новых планов НАТО по защите от дронов и крылатых ракет после инцидента в Литве.

Стало известно о падении дрона у немецкого военного аэродрома

В Германии недалеко от военного аэродрома бундесвера обнаружены обломки неизвестного беспилотного летательного аппарата.

Цены на дизель в США обновили абсолютный исторический максимум

Средняя цена дизеля на американских автозаправочных станциях достигла рекордных значений, превысив отметку в шесть долларов за один галлон.

На Украине после атаки БПЛА загорелся поезд Киев – Николаев

Под Киевом после атаки вспыхнул поезд, направлявшийся в Николаев, сообщили военкоры.

Медведь насмерть задрал женщину во дворе дома в Красноярском крае

В селе на юге Красноярского края местная жительница погибла в результате нападения дикого медведя прямо во дворе собственного частного дома.

ФСИН запланировала построить семь суперколоний на 20 тыс. мест

К 2035 году планируется построить семь современных многофункциональных учреждений ФСИН, которые заменят устаревшие исправительные колонии, говорится в новой редакции федеральной целевой программы «Развитие уголовно-исполнительной системы (2018-2035 годы)».

ВС России поразили автозавод в Киеве и сухогруз в порту «Черноморск»

В ночь на среду российская армия поразила объекты украинского оборонно-промышленного комплекса и сухогруз с вооружением в порту Черноморска, сообщило Минобороны.

Грузия отказалась от вступления в ЕС без Абхазии и Южной Осетии

Евросоюз не представляет никакого интереса для Грузии без Абхазии и Цхинвальского региона (так в Тбилиси называют Южную Осетию), заявил председатель парламента Шалва Папуашвили, передает корреспондент газеты ВЗГЛЯД в Тбилиси.

Фон дер Ляйен предложила создать европейский аналог статьи 4 НАТО

Глава Еврокомиссии Урсула фон дер Ляйен предложила создать европейский механизм экстренного реагирования на угрозы безопасности, аналогичный статье 4 договора НАТО. По словам главы ЕК, существующие институты, доктрина и процедуры принятия решений Евросоюза не успевают за новой реальностью.

Мерц пообещал нажать на «долговой тормоз»

Канцлер Германии Фридрих Мерц пообещал немедленно ограничить госзаимствования страны, если под угрозой окажется ее способность обслуживать долги.

Большинство избирателей в США признали Трампа опасным и коррумпированным

Большинство зарегистрированных избирателей в США считают президента Дональда Трампа коррумпированным и опасным политиком в преддверии промежуточных выборов.
Мнения

Вадим Трухачёв: Хочет ли Швеция снова воевать с Россией

Выборы в Швеции не вызвали большого интереса в России – хотя речь идёт о богатой и влиятельной стране, занимающей третье место по вооружению Украины. Однако в местной политике для нас царит почти полный мрак, и учитывать приходится только «нюансы» того, насколько враждебны к нам те или иные шведские политические силы.

Сергей Миркин: Эйфория от ударов по России сменилась на Украине отчаянием

На что рассчитывал Зеленский, начиная эскалацию? Логика майданных политиков проста. Россия воюет на свои деньги, а Украина на деньги европейцев. Значит, Украина более устойчива к ударам со стороны России, чем Россия со стороны Украины. Бред? Конечно, бред. Но на нем строится вся украинская политика.

Игорь Мальцев: Откуда в Германии «русские дроны»

В обстановке тяжелого бреда канцлер Мерц обвинил Россию в развязывании «гибридной войны» и объявил о комплексе мер по сдерживанию России «всеми возможными средствами». На робкие вопросы: «Почему это русские?» – следует единственный ответ: «Потому».
Вопрос дня

Как были обретены мощи святого князя Дмитрия Донского