Mythos Preview. AISI Report

Mythos Preview. AISI Report

Dmitry Nikitin @dmitrynikitin

Оценка киберспособностей Claude MythosPreview

Институт безопасности ИИ (AISI)

30 апреля 2026 г.

Мы провели кибер-оценки модели AnthropicClaude Mythos Preview и обнаружили продолжающееся улучшение в задачах Capture-the-Flag (CTF), а также значительный прогресс в симуляциях многоэтапных кибератак.

 

Институт безопасности ИИ (AISI) провёл независимую оценку Claude Mythos Preview(анонсирована 7 апреля 2026 года) с целью оценки её киберспособностей. Результаты показывают, что Mythos Preview представляет собой заметный шаг вперёд по сравнению с предыдущими frontier-моделями на фоне уже быстро растущих киберспособностей ИИ.

Мы отслеживаем киберспособности ИИ с 2023 года, постепенно усложняя оценки, чтобы не отставать от прогресса технологий — от простых чат-тестов до задач Capture-the-Flag и многоэтапных симуляций кибератак, описанных ниже. Два года назад лучшие модели с трудом справлялись с задачами начального уровня. Сейчас, в контролируемых условиях, где модель MythosPreview была явно направлена и получила сетевой доступ, мы наблюдали, как она самостоятельно выполняет многоэтапные атаки на уязвимые сети, обнаруживает и эксплуатирует уязвимости — задачи, на которые у человеческих специалистов ушли бы дни работы.

В этом обзоре мы суммируем результаты кибер-оценок, проведённых на Mythos Preview. Они включают как задачи Capture-the-Flag (CTF), так и более сложные кибер-диапазоны, имитирующие реальные многоэтапные сценарии атак.

Результаты Capture-the-Flag (CTF)

В задачах CTF модели ИИ должны выявлять и эксплуатировать уязвимости в целевых системах для получения скрытых «флагов». График ниже показывает производительность Mythos Preview на нашем наборе CTF по сравнению с другими моделями. Каждая точка — средний процент успеха модели на определённом уровне сложности.

Рисунок 1 - Performance on technical non-expert and apprentice level Capture the Flag tasks (CTFs) for models since November 2022. GPT-3.5 Turbo through to Claude 4 Opus average 10 runs up to 2.5M tokens. GPT-5 through to Mythos Preview average 5 runs up to 2.5M tokens.

Рисунок 2 - Performance on practitioner and expert level Capture the Flag tasks (CTFs) for models since August 2025. All models average 5 runs up to50M tokens.

На задачах экспертного уровня (которые ни одна модель не могла решить до апреля 2025 года) Claude Mythos Preview достигает успеха в 73 % случаев.

Результаты кибер-диапазонов

Даже экспертные CTF проверяют отдельные навыки в изоляции. Реальные кибератаки требуют последовательного выполнения десятков шагов по нескольким хостам и сегментам сети — операций, которые у человеческих экспертов занимают часы, дни или недели.

В качестве первого шага мы создали симуляцию «The Last Ones» (TLO) — 32-шаговую атаку на корпоративную сеть (от начальной разведки до полного захвата). По нашим оценкам, человеку на это требуется около 20 часов. Более подробное описание диапазона доступно в нашей недавней научной статье.

Claude Mythos Preview стала первой моделью, которая полностью решила TLO от начала до конца в 3 из 10 попыток. В среднем по всем попыткам модель выполнила 22 из 32 шагов. Следующая лучшая модель (Claude Opus 4.6) в среднем выполнила 16 шагов.

Рисунок 3 - Average number of steps completed on 'The Last Ones' (a 32-step simulated corporate network attack) as a function of total token spend. Each line represents a different model...

Mythos Preview также продемонстрироваланекоторые ограничения в рамках нашей оценки. Она не смогла завершить кибер-диапазон «CoolingTower» (ориентированный на операционные технологии — OT), хотя это не обязательно означает слабость в OT-средах — модель застревала на IT-участках.

Мы ожидаем дальнейшего улучшения результатов при увеличении вычислительных ресурсов на выводе (мы использовали бюджет до 100 млн токенов). Производительность MythosPreview продолжает масштабироваться до этого предела.

Выводы

Успех Mythos Preview в одном кибер-диапазоне показывает, что модель способна автономно атаковать небольшие, слабо защищённые корпоративные системы при наличии сетевого доступа. Однако наши тестовые среды проще реальных (отсутствуют активные защитники, системы обнаружения вторжений и штрафы за тревоги). Поэтому мы не можем утверждать, что модель сможет атаковать хорошо защищённые системы.

В будущем мы будем тестировать модели в укреплённых средах с активным мониторингом, обнаружением конечных точек и реагированием на инциденты в реальном времени.

Что организациям следует делать прямо сейчас

Наше тестирование показывает, что MythosPreview может эксплуатировать системы со слабой защитой, и такие возможности появятся у других моделей. Это подчёркивает важность базовой кибергигиены:

 

• своевременное применение обновлений безопасности;

• строгий контроль доступа;

• правильная конфигурация систем;

• ведение всестороннего логирования.

 

Рекомендуем программу Cyber Essentials от Национального центра кибербезопасностиВеликобритании (NCSC). Актуальные рекомендации — на сайте NCSC.

Киберспособности frontier-моделей будут только расти. Инвестиции в защиту сегодня жизненно необходимы. При этом киберспособности ИИ имеют двойное назначение: они создают вызовы, но также могут кардинально улучшить оборону.


Report Page