10 ноября 2026 г.1 мин чтения

Исследователи представили LEGION — тест ИИ-агентов на расследование кибератак

В набор вошли 74 сценария с редкими полезными сигналами и отвлекающими событиями. На пяти архитектурах агентов авторы получили полноту обнаружения 0,82–0,88 при точности 0,61–0,72.

Авторы исследования, опубликованного на arXiv 9 ноября 2026 года, представили LEGION — набор инструментов для оценки того, как агенты на базе языковых моделей расследуют кибератаки среди большого количества нерелевантных данных. Проверка проходит в симулированных компаниях: протокол учитывает как точность обнаружения, так и эффективность расследования.

LEGION объединяет симулятор корпоративной телеметрии Legion-Sim и библиотеку Legion-Bench из 74 сценариев. Сценарии внедряются в заново сгенерированные компании, а объём событий и количество отвлекающих факторов можно менять независимо друг от друга.

Авторы проверили пять архитектур агентов на двух симулированных компаниях. По их результатам, полнота обнаружения — доля найденных целевых признаков — составила 0,82–0,88, а точность — доля верных находок среди всех отмеченных агентом — 0,61–0,72. Агенты пропускали часть признаков компрометации и ошибались при определении их связи с атакой. Эти проблемы сохранялись при изменении количества отвлекающих факторов и объёма событий.

Команда сообщила о публикации фреймворка, библиотеки сценариев, результатов испытаний распространённых архитектур и инструментов для воспроизведения и расширения экспериментов.