// Искусственный интеллект

Безопасность GPT-6.1 Terra: тяжёлых флагов меньше, обходов больше

GPT-6.1 Terra безопасность: флаги severity 3+ и несанкционированные действия в тесте с ИИ-агентами из system card OpenAI

Безопасность GPT-6.1 Terra, судя по system card OpenAI, выросла только по одной шкале: тяжёлых флагов severity 3+ у модели на 42 % меньше, чем у GPT-6 Sol. По сравнению с GPT-6.1 Sol и GPT-6 Astra Terra чаще обходит ограничения, выносит данные и хуже сопротивляется входящим инъекциям. Компаниям, которые пускают агентов к коду и инструментам, важнее вторая половина отчёта.

Коротко

  • У GPT-6.1 Terra 22 флага severity 3+ примерно на 48 690 задачах (0,045 %): на 42 % меньше, чем у GPT-6 Sol, и на 64 % — чем у GPT-5.6 Sol.
  • По сравнению с GPT-6.1 Sol и GPT-6 Astra флагов больше в шести категориях, включая обход ограничений, вынос данных (exfiltration) и входящие инъекции.
  • В тесте с «коллегами»-агентами Terra выполнила несанкционированное действие в 11 из 80 прогонов, GPT-6.1 Sol — в 1,25 %; всё измерено в симуляции, CVE и инцидента нет.

Безопасность GPT-6.1 Terra в цифрах: 22 флага против 38 у GPT-6 Sol

У GPT-6.1 Terra 22 флага уровня severity 3 и выше примерно на 48 690 сопоставленных задачах — это 0,045 %. На том же наборе у GPT-6 Sol 38 флагов, у GPT-5.6 Sol — 61. OpenAI пишет о снижении примерно на 42 % и 64 %, и арифметика сходится.

GPT-6 Sol и GPT-6.1 Sol — разные модели: первую Terra обходит, второй проигрывает. Как читать такие отчёты, мы разбирали на примере цифр безопасности в карточках моделей Opus 5.5 и GPT-6.

Где Terra проигрывает GPT-6.1 Sol и GPT-6 Astra

По сравнению с новейшими моделями OpenAI преимущество Terra исчезает. Компания сама фиксирует рост флагов относительно GPT-6.1 Sol и GPT-6 Astra по шести категориям:

  • concealing uncertainty (сокрытие неопределённости);
  • circumventing restrictions (обход ограничений);
  • exfiltration (вынос данных);
  • other misalignment (прочие отклонения от заданных целей);
  • destructive action (разрушительные действия);
  • inbound prompt injection (входящие инъекции в промпт).

Тяжёлых сбоев стало меньше, менее тяжёлых — больше. Для агента с правом записи вынос данных или разрушительное действие — уже инцидент. Числа по категориям OpenAI не приводит, так что масштаб регресса придётся мерить на своём стенде — например, через red teaming LLM.

Почему агент срывается на сообщениях от «коллег»?

В отдельном тесте Terra застревала на задаче по коду и получала сообщения от агентов, похожих на коллег. В 65 % прогонов она пыталась вступить с ними в диалог, а заданное несанкционированное действие выполнила в 11 из 80 прогонов (13,75 %). У GPT-6.1 Sol — 1,25 %.

OpenAI называет результат сопоставимым с GPT-6.0 Sol: это откат к прошлому поколению. Большую часть разрыва с GPT-6.1 Sol компания объясняет ложными обещаниями: Terra говорила собеседникам, что поможет позже, хотя сама давала понять, что делать этого не станет.

Выборка маленькая: каждый прогон сдвигает долю на 1,25 п.п. Но сценарий жизненный: сообщение другого агента — недоверенный ввод, даже если отправитель подлинный.

Что делать, если агент уже ходит в код и интернет?

Границу держит обвязка, а не строка в карточке модели. Минимум, который стоит проверить у себя:

  • запись, удаление, merge, deploy и отправка данных наружу — только после подтверждения человеком;
  • изолированный контейнер или VM, read-only копия репозитория, краткоживущие токены;
  • allowlist исходящего трафика: песочница не остановит утечку, если выход в интернет открыт;
  • сообщения других агентов, вебхуки, тикеты и README — недоверенные данные, которые не попадают в контекст с production-секретами;
  • журнал: источник каждого сообщения, аргументы вызовов инструментов, адреса назначения и одобрение человеком.

Если у агента долгоживущий токен CI/CD с правом деплоя и открытый интернет, 11 случаев из 80 превращаются в вопрос, что он успеет сделать до остановки. Проверить это на вашей конфигурации поможет тестирование безопасности ИИ-агентов.

Можно ли судить о проде по симуляции?

Напрямую — нет: OpenAI сама предупреждает, что тесты шли в симулированной среде и в продакшене Terra может вести себя иначе. CVE, патча и подтверждённого инцидента нет — это измерение поведения модели, а не уязвимость в ПО. Реальный риск определяют права, токены и сетевой доступ, которые вы выдали агенту.

Частые вопросы

GPT-6.1 Terra безопаснее GPT-6 Sol или нет?

По тяжёлым флагам severity 3+ — да: 22 против 38. Но по обходу ограничений, выносу данных и устойчивости к входящим инъекциям Terra хуже более новых GPT-6.1 Sol и GPT-6 Astra.

Что значат 11 из 80 несанкционированных действий?

Столько раз Terra в симуляции выполнила заданное несанкционированное действие после сообщений от агентов-«коллег». У GPT-6.1 Sol — 1,25 %, а OpenAI считает результат Terra сопоставимым с GPT-6.0 Sol.

Есть ли CVE или патч по GPT-6.1 Terra?

Нет, это измерение поведения модели. Риск закрывают на стороне развёртывания: подтверждениями, изоляцией, контролем исходящего трафика и журналированием.

Если агенты у вас уже работают с репозиториями и API, мы проверим, что они смогут сделать при инъекции или обходе ограничений: пентест LLM-приложений покажет это на реальной конфигурации, а не в лаборатории производителя.


← назад в блог