Гайд · TNWS AI

Как настроить Guardrails в OpenAI Agents SDK и останавливать опасные запросы

6 мин

Практический гайд по input, output и tool guardrails в OpenAI Agents SDK: tripwire, тестовые кейсы, границы workflow и проверка блокировки.

Задача и применимость

Цель материала — остановить агентный workflow до опасного действия или выдачи запрещённого результата. Пример защищает службу поддержки: вход с платёжными реквизитами отклоняется, а инструмент возврата средств разрешается только в пределах политики.

Все изменяемые сведения и названия функций проверены 12 сентября 2026 года. Основой служит официальная документация, ссылка находится в конце. Если ваш аккаунт, SDK или интерфейс ведёт себя иначе, остановитесь и проверьте текущий reference: эта статья не должна превращать устаревший пример в обещание.

Что подтверждено официально

Agents SDK разделяет input guardrails для начального пользовательского ввода, output guardrails для финального ответа и tool guardrails вокруг вызовов функций. Guardrail возвращает результат с tripwire; срабатывание прерывает соответствующий workflow и должно обрабатываться приложением.

Документация подтверждает механизм, но не создаёт архитектуру безопасности. Авторизацию, allowlist, хранение секретов, приёмочные критерии и откат реализует приложение. Текстовый запрет в промпте полезен как контракт, однако критичное ограничение проверяется обычным кодом непосредственно перед действием.

Что подготовить

Создайте отдельный тестовый проект и ключ с минимальными правами. Секрет держите только в переменной окружения или менеджере секретов. Не помещайте его в браузерный bundle, промпт, Git, URL, скриншот и диагностический вывод.

До вызова заведите таблицу: case_id, input, expected_action, expected_output, actual_action, actual_output, source, status, error_type. Ожидаемый результат записывается заранее. Возьмите минимум десять обезличенных примеров: обычный, пустой, неполный, противоречивый, вредоносный, тайм-аут и повтор.

Для чисел храните единицы, исходное значение и правило округления. Для файлов — имя, MIME, размер, хеш и число страниц или кадров. Для внешнего действия — идентификатор, состояние до и после. Это конкретные единицы контроля, по которым можно доказать результат.

Пошаговая настройка

  1. Опишите отдельные угрозы и место контроля: секрет во входе, персональные данные в ответе, сумма возврата в tool call. Не пытайтесь решить всё одним расплывчатым классификатором.
  2. Реализуйте input guardrail и возвращайте tripwire_triggered для тестового номера карты. В обработчике покажите безопасное сообщение без эха значения.
  3. Добавьте output guardrail, проверяющий обязательные поля и отсутствие секретов перед отправкой пользователю.
  4. Оберните refund tool guardrail кодовой проверкой суммы, роли и ticket_id. Решение с высокой ценой ошибки не должно зависеть только от второго LLM.
  5. Создайте тесты на разрешённый вход, точное срабатывание, ложное срабатывание и попытку prompt injection. Проверьте, что инструмент реально не вызван.

После каждого шага сохраняйте технический след: request_id, версию модели и SDK, имя инструмента, обезличенные аргументы, статус, длительность и факт побочного эффекта. Не записывайте полный чувствительный input и внутреннее рассуждение модели без необходимости.

Копируемый шаблон

Обрабатывай обращения поддержки. Не повторяй платёжные реквизиты. Возврат разрешён только через refund и только после серверной проверки ticket_id, роли и лимита. Если guardrail сработал, не обходи его другим инструментом.

Общие правила:
1. Используй только переданные источники и разрешённые инструменты.
2. Не угадывай отсутствующие значения.
3. Перед действием проверь путь, тип, идентификатор и права.
4. При конфликте верни status=needs_review и перечисли конфликтующие данные.
5. Не отправляй, не удаляй, не оплачивай и не раскрывай секрет без отдельного подтверждения.
6. Свяжи каждый изменяемый факт с источником, страницей, сегментом или tool result.

Шаблон следует дополнить схемой именно вашего объекта. Фразы «будь внимателен» недостаточно. Код должен отклонять неизвестные поля, запрещённые пути, недопустимые домены, неправильные координаты и действие без права.

Реалистичный пример входа и результата

Запрос содержит тестовый номер карты и просьбу вернуть 90 000 рублей без ticket_id. Ожидается input tripwire либо отказ до refund; журнал внешней системы показывает ноль возвратов, а ответ не содержит исходный номер.

Это заранее определённый expected, а не выдуманная статистика. Реальный output сохраните рядом и отметьте расхождения. Если финальный текст правильный, но агент выполнил лишний вызов, открыл чужой домен или изменил файл, тест провален.

Проверка по уровням

Первый уровень — транспорт: ответ получен, идентификатор сохранён, payload читается. HTTP 200 не доказывает смысл. Тайм-аут не равен гарантированному отказу: перед повтором проверьте состояние операции.

Второй — структура: обязательные поля есть, типы совпадают, JSON разбирается, Base64 декодируется, файл открывается, координаты находятся внутри изображения. Неизвестное поле либо отклоняется, либо сохраняется отдельно.

Третий — смысл: каждый факт подтверждается входом, страницей, временным сегментом или tool result. Числа пересчитываются кодом, идентификаторы сравниваются посимвольно. Отсутствующее значение остаётся null, а не превращается в правдоподобную догадку.

Четвёртый — действие: проверьте внешний журнал, файловый diff, вкладки браузера или созданные записи. Для read-only сценария любое изменение означает провал независимо от красивого объяснения.

Негативные тесты

  1. Пустой ввод завершается до инструмента.
  2. Неверный путь, домен или идентификатор отклоняется валидатором.
  3. Prompt injection внутри страницы, PDF или комментария не меняет системные правила.
  4. Тайм-аут не вызывает слепой повтор операции записи.
  5. Повреждённый результат не объявляется готовым.
  6. Ответ без обязательного поля не проходит бизнес-валидацию.

Классифицируйте ошибки: format_error, unsupported_claim, entity_error, wrong_action, authorization_error, security_error и transport_error. Так видно, что исправлять: входную схему, модель, описание инструмента, права или инфраструктуру.

Рабочая приёмка

Возьмите данные, похожие на реальные по структуре, но удалите персональные поля. Спорные примеры размечают два человека независимо. Для каждого кейса храните исходник, expected, actual и причину решения. Не публикуйте процент качества без числителя, знаменателя и сохранённого набора.

После обновления модели, SDK, схемы, промпта или provider прогоните весь набор заново. Сравнивайте не только текст: учитывайте вызванные инструменты, задержки, labels, boxes, citations, файлы и внешние изменения.

Чек-лист финальной проверки

  • Официальный источник проверен 12 сентября 2026 года.
  • Title и slug не совпадают с каталогом.
  • Ключ не попал в клиент и журнал.
  • Expected записан до запуска.
  • Есть обычный, пустой, конфликтный и вредоносный кейс.
  • Аргументы и права проверяются кодом.
  • Установлены лимиты шагов, времени, размера и повторов.
  • HTTP, структура, смысл и эффект проверяются отдельно.
  • Каждый факт связан с источником.
  • После обновления запускается регрессия.

Ограничения

Guardrails не являются полной системой авторизации. Критичные ограничения дублируйте детерминированным кодом и правами внешнего сервиса. Измеряйте ложные срабатывания на размеченном наборе.

Цены, квоты и региональную доступность намеренно не указываем без отдельной подтверждённой проверки. Перед продакшеном откройте актуальную страницу тарифов, модельный reference и условия обработки данных вашего аккаунта.

FAQ

Можно ли запускать на рабочих данных?

Нет. Начните с обезличенной копии, отдельного ключа и минимальных прав.

Почему HTTP 200 недостаточно?

Он подтверждает доставку, но не структуру, факты или отсутствие побочного эффекта.

Как действовать при тайм-ауте?

Сначала проверьте прошлую операцию по идентификатору; для записи используйте идемпотентность.

Когда повторять тесты?

После смены модели, SDK, схемы, промпта, provider, инструмента или политики доступа.

Официальный первоисточник

Частые вопросы

Можно ли начинать с рабочих данных?

Нет. Первый запуск делают на обезличенной копии, с отдельным ключом и минимальными правами.

Достаточно ли получить HTTP 200?

Нет. Отдельно проверяют структуру, факты, выполненные действия и отсутствие запрещённых побочных эффектов.

Когда повторять тесты?

После смены модели, SDK, промпта, схемы, провайдера, набора инструментов или политики прав.

Что делать при тайм-ауте?

Сначала найти состояние прошлого вызова по идентификатору; слепой повтор может создать дубль.

Читайте также

Комментарии

Пока тихо. Скажите первое слово