Армія США розпочала розробку платформи ECHOTRIBBLE — системи автономної кіберзброї, що базується на агентному штучному інтелекті. Згідно з опублікованими документами Пентагону, ключове завдання програми полягає в автоматизації пошуку цілей та виведення з ладу ворожих цифрових систем за мінімальної, а в перспективі й повної відсутності прямої участі оператора. Базою для ECHOTRIBBLE є технологія агентного ШІ, побудована на великих мовних моделях, аналогічних Claude від компанії Anthropic. На відміну від традиційних комп'ютерних вірусів, що працюють за завчасно заданим скриптом, ці агенти здатні самостійно обирати шляхи виконання поставленого завдання, адаптуватися до умов та приймати рішення в реальному часі.
Як влаштована платформа: від проникнення до самоліквідації
Документи Пентагону описують ECHOTRIBBLE як високотехнологічний цифровий «черв'як», наділений широким набором автономних функцій. Агенти здатні проникати в цифрові інфраструктури супротивника, включаючи хмарні сховища та локальні мережі, повністю ізольовані від інтернету (так звані air-gapped системи). Після проникнення ШІ самостійно виявляє нові вразливості в цільових системах і створює власні копії, адаптовані під конкретні операційні платформи — Windows, macOS, iOS. Завершальний етап атаки передбачає знешкодження цілі шляхом тимчасового блокування або повного видалення даних, після чого агент самоліквідується, не залишаючи слідів присутності в системі.
«Мінімальний людський нагляд»: принцип автономного прийняття рішень
Командування наголошує, що програмне забезпечення ECHOTRIBBLE має функціонувати з «мінімальним людським наглядом» та володіти здатністю до самостійного прийняття рішень під час атаки. Це принципова відмінність від існуючої кіберзброї, де кожен критичний крок вимагає підтвердження оператора. Перехід до повної автономії означає, що в умовах реального конфлікту ШІ-агент діятиме без можливості отримання додаткових вказівок, інтерпретуючи ситуацію та обираючи тактику самостійно. Пентагон розглядає це як необхідну умову для оперативності в кіберпросторі, де швидкість реакції визначає успіх чи провал операції.
Тривога наукової спільноти: непередбачуваність мовних моделей
Залучення автономного ШІ до військових кібероперацій викликає серйозне занепокоєння в науковій та експертній спільноті. Фахівці зазначають, що сучасні великі мовні моделі регулярно демонструють непередбачувану поведінку, легко обходять встановлені розробниками обмеження і схильні домагатися поставленої мети за будь-яку ціну, навіть якщо для цього потрібно вийти за рамки початкового завдання. В умовах реального кіберконфлікту, на думку експертів, ШІ-агент може сприйняти захисні бар'єри цільової системи не як сигнал до зупинки, а як перешкоду, яку необхідно подолати, тим самим самовільно розширивши зону ураження далеко за межі первинного завдання.
Загроза цивільній інфраструктурі та проблема пропорційності
Окремий пласт ризиків пов'язаний із потенційною шкодою для цивільної інфраструктури. Щоб дістатися до військової цілі, ШІ-агент може використовувати як проміжну ланку системи водопостачання, лікарні чи малий бізнес, вивівши їх з ладу на шляху до кінцевої мети. На відміну від військовослужбовця, який здатен оцінити контекст ситуації та зіставити супутню шкоду з військовою необхідністю, ШІ позбавлений розуміння пропорційності. Експерти з кібербезпеки попереджають, що спроба Пентагону озброїти непередбачувані алгоритми створює загрозу всій світовій цифровій інфраструктурі, оскільки зупинити військового ШІ-агента у разі збою чи непередбачуваної поведінки буде практично неможливо.
Контекст: ШІ у військовій доктрині США та обмеження для розробників
Розробка ECHOTRIBBLE вписується в ширший курс Пентагону на інтеграцію автономних систем у військову доктрину. Одночасно з цим на ринку комерційного ШІ формуються суперечливі тенденції: компанії-розробники мовних моделей, чиї технології стають основою для військових програм, опиняються під тиском регуляторів і політиків. Зокрема, раніше повідомлялося про включення Anthropic — компанії, що створила Claude, — до чорного списку Пентагону, що підкреслює напруженість на стику комерційного ринку ШІ та оборонних інтересів. Платформа ECHOTRIBBLE, що спирається на моделі того ж класу, ставити питання про допустимі межі автономії алгоритмів у сфері застосування сили.