SecRadar / Безопасность ИИ / AI firewall и AI Gateway
OWASP LLM01/LLM02/LLM06 · Класс решений · Безопасность ИИ

AI firewall и AI Security Gateway: что это и как работает

AI firewall (его же называют LLM firewall или, у части вендоров, AI Security Gateway) — прокси-слой между приложением и LLM-провайдером, который фильтрует запросы и ответы модели в реальном времени: ищет промпт-инъекции и джейлбрейк-паттерны, вычищает утечки чувствительных данных и решает, какие действия разрешить ИИ-агенту. Это не сетевой файрвол в привычном смысле — он работает не с портами и IP-адресами, а с текстом и семантикой запроса.

AI Security / карта класса

Редакция SecRadar · как мы проверяем сведения

AI firewall, или LLM firewall, — защитный компонент для проверки обмена между приложением и языковой моделью. Его задачи могут включать обнаружение промпт-инъекций и утечек данных. Проверка документов RAG и вызовов инструментов агента требует отдельных точек контроля: название продукта само по себе не подтверждает их наличие.

Экспертная редакция SecRadar · как мы проверяем факты → Обновлено 6 октября 2026 · ~10 мин чтения Основания: OWASP LLM Top 10, редакция 2025; ссылки в тексте

Кратко

Назначение
Проверять запросы к LLM и ответы модели в тех точках, куда подключена защита.
Граница
Текстовый фильтр не заменяет права доступа к документам, авторизацию инструментов и контроль действий агента.
Термины
AI Firewall, AI Security Gateway и guardrails пересекаются. Сравнивайте функции и схему подключения, а не название.
Выбор
Разделите сценарии чата, RAG и агента; проверьте документацию точной редакции и проведите пилот на своих запросах.

Короткий ответ: что такое AI firewall

AI firewall проверяет содержимое обмена с языковой моделью по заданным политикам. Он может быть отдельным шлюзом, встроенным компонентом приложения или вызываться через API. Нужно проверить, какие потоки действительно проходят через него и где применяется блокировка.

В этой статье AI firewall означает защиту LLM-приложения. Термин также используют для сетевых продуктов, применяющих ИИ внутри своих механизмов; это другой смысл. Здесь важен контроль запросов, контекста и ответов модели, а не перечень технологий внутри сетевого экрана.

Архитектуру и критерии разбираем ниже. Каталог AI Security помогает выбрать тип решения, а сравнение возможностей — проверить основания и ограничения конкретных продуктов.

Как работает AI firewall: фильтрация входа, выхода и действий агента

Рассматривайте перечисленное как точки проверки архитектуры, а не обязательный набор функций каждого продукта.

  1. До обращения к модели. Проверка пользовательского запроса и передаваемого контекста. Если фильтр видит только текст пользователя, документы и результаты поиска могут остаться вне проверки.
  2. После ответа модели. Проверка ответа до передачи пользователю или другому компоненту. Для потокового вывода выясните, какие данные успевают уйти до окончательного решения.
  3. Перед вызовом инструмента. Отдельная проверка инструмента, параметров, прав пользователя и допустимости действия. Она не следует автоматически из наличия фильтра промптов.
  4. При обработке нарушения. Блокировка, изменение ответа, журналирование или иной результат должны быть явно описаны. Режим наблюдения не равен предотвращению.

Тестирование атаками до выпуска и защита работающего приложения решают разные задачи. Сопоставляйте решения внутри подходящего сценария, не объединяя red teaming и шлюз одним показателем.

Защита чата, RAG и ИИ-агента: где ставить проверки

Чат с моделью

Проверьте пользовательский ввод и ответ модели. На пилоте разделяйте опасные запросы и обычные рабочие диалоги, чтобы видеть и пропуски, и ложные блокировки.

RAG по документам

Недоверенная инструкция может прийти из найденного документа. Проверьте обработку извлечённого контекста и права пользователя на источники; наличие RAG само по себе не устраняет промпт-инъекцию.

Агент с инструментами

Текстовый ответ и исполняемое действие проверяются раздельно. Ограничьте набор операций и полномочия; для значимых действий предусмотрите подтверждение. Нельзя полагаться только на решение модели.

Основания: OWASP LLM01:2025 — прямые и косвенные инъекции, LLM02:2025 — раскрытие чувствительной информации и LLM06:2025 — избыточные полномочия и автономность. Это рекомендации к архитектуре, не подтверждение функций вендоров.

Как оценить AI firewall на пилоте

Зафиксируйте модель, версию защиты, настройки, язык и набор запросов. Сравнивайте одинаковые условия и сохраняйте исходный результат без защитного компонента.

  • Пропуски атак: сколько проверенных опасных сценариев достигли запрещённого результата, из общего числа атакующих сценариев.
  • Ложные блокировки: сколько допустимых рабочих запросов отклонено, из общего числа допустимых запросов.
  • Задержка: добавленное время ответа и время до первого токена при той же нагрузке; для потокового режима — что было передано до блокировки.
  • Отказ: результат при недоступности защиты и сохранность журналов; согласуйте допустимое поведение заранее.

Не сводите эти показатели в один «процент защиты». Набор тестов, знаменатели и условия определяют смысл результата. Открыть проверки пилота в сравнении →

AI firewall vs AI Security Gateway vs LLM guardrails

Три термина в индустрии используются с заметным перехлёстом — их путают даже сами вендоры, называя один и тот же продукт то firewall, то gateway в разных материалах. Единой закреплённой стандартом границы между ними нет, но по тому, как продукты описывают на практике, просматривается рабочее разграничение.

AI firewall LLM firewall

Защитный компонент с акцентом на проверку обмена с LLM. Способ интеграции и набор детекторов зависят от продукта.

AI Security Gateway часто синоним

AI Security Gateway может обозначать защитный шлюз. Более широкое название AI Gateway также используют для маршрутизации к моделям, лимитов и учёта потребления. Эти функции сами по себе не подтверждают защиту от промпт-инъекций.

LLM guardrails более широкое понятие

Набор политик и правил, ограничивающих допустимый ввод и вывод модели. Guardrails необязательно означают отдельный прокси-компонент — их можно встроить прямо в код приложения. AI firewall — один из способов реализовать guardrails именно как отдельный инфраструктурный слой, а не единственный.

Практический вывод: если внутри команды спор идёт о названии, а не о функциях, — не тратьте на него время. При выборе продукта важнее не то, как вендор называет категорию, а что именно проверено (см. раздел «Что детектирует» ниже) и на каком этапе — на входе, на выходе или на обоих.

оценка разграничение терминов — синтез редакции по описаниям вендоров, не официальная классификация OWASP/NIST

Что проверять: связь AI firewall с OWASP LLM Top 10

Код OWASP описывает риск, а не сертификат качества продукта. Таблица ниже — ориентир для вопросов и пилота; эффективность механизмов не измерена этой статьёй.

Функциональность AI firewall почти всегда описывается вендорами не абстрактно, а через конкретные пункты OWASP Top 10 for LLM Applications 2025 — это удобный общий язык для сравнения продуктов между собой.

↔ таблицу можно прокрутить вбок

Риск / сценарийКод OWASPМеханизм для проверкиРазбор
Промпт-инъекция (прямая и косвенная)LLM01:2025Фильтрация запроса на входе, детекция паттернов, сегрегация недоверенного внешнего контентаПромпт-инъекция →
Джейлбрейк-паттернытехнически LLM01:2025*Мониторинг многоходовых диалогов на аномалии — эскалацию, many-shot-паттерныДжейлбрейк →
Утечка чувствительных данных в ответахLLM02:2025DLP-фильтрация вывода, маскирование PII и коммерческой тайныВиды атак →
Избыточная автономность агентаLLM06:2025Контроль вызовов инструментов и MCP-серверов (allow/deny/log), least-privilegeВиды атак →
Утечка системного промптаLLM07:2025Валидация вывода на признаки раскрытия скрытых инструкций приложенияПромпт-инъекция →

* Джейлбрейк не выделен в OWASP Top 10 2025 отдельным пунктом и технически покрывается LLM01:2025, хотя по цели атаки (обход alignment модели, а не системного промпта приложения) индустрия рассматривает его как самостоятельное явление — подробнее на странице разбора.

факт коды и названия категорий — genai.owasp.org/llm-top-10, редакция 2025 оценка привязка «механизм защиты → код» — синтез редакции по функциональности продуктов класса, не дословная норма OWASP

На что смотреть при выборе AI firewall

  1. Покрытие потоков. Какие запросы, ответы, документы и вызовы инструментов проверяются? Какие обходные пути остаются?
  2. Формат интеграции. Поддерживаемые API, локальные и облачные модели, потоковый вывод, вложения, SDK и место установки компонента.
  3. Данные. Где обрабатываются и сохраняются запросы, кому доступны журналы, как задаются сроки хранения и маскирование.
  4. Действия и отказ. Что происходит при срабатывании, таймауте, ошибке детектора и недоступности шлюза?
  5. Эксплуатация. Версии правил, обновление, откат, журнал событий, интеграция с SIEM и разбор ложных блокировок.
  6. Подтверждения. Документация конкретной версии и результаты пилота на одинаковом наборе проверок. Реестровый статус и условия закупки проверяются отдельно.

Выберите кандидатов в сравнении AI Security, затем используйте проверки качества на пилоте. Одна демонстрация или упоминание в СМИ не подтверждает все возможности поставки.

Российский рынок: решения для защиты LLM

Российские AI Firewall и смежные продукты собраны в каталоге AI Security. Там разделены назначение и границы решений: защита работающего приложения, проверка моделей и red teaming.

Для сравнения конкретных поставок перейдите к таблице возможностей и версиям и источникам. Здесь не дублируем быстро меняющийся перечень функций: название AI Gateway или наличие записи в реестре не доказывает контроль RAG, MCP либо действий агента.

Частые вопросы

Что такое AI firewall простыми словами?
Это защитный компонент, который проверяет обмен между приложением и языковой моделью по заданным политикам. Нужно отдельно выяснить, какие запросы, ответы и другие данные действительно проходят через проверку.
Чем AI firewall отличается от AI Security Gateway?
Названия могут пересекаться. AI Gateway может отвечать за маршрутизацию, лимиты и учёт потребления без проверки атак. Сравнивайте документированные функции конкретной поставки, а не название категории.
Чем AI firewall отличается от LLM guardrails?
Guardrails — политики и механизмы ограничения работы приложения с LLM. Их можно встроить в приложение или вынести в отдельный компонент. Способ интеграции и границы проверки нужно уточнять по документации.
Какие атаки останавливает AI firewall?
Это зависит от реализации и настроек. Промпт-инъекции, раскрытие данных и опасные вызовы инструментов требуют отдельных проверок. Перечень рисков OWASP не является доказательством эффективности продукта; её проверяют на пилоте.
Какие российские решения класса AI firewall есть на рынке?
Актуальный список, назначение и границы российских решений собраны в каталоге AI Security SecRadar. Версии и документированные возможности приведены на странице сравнения AI Security.
Достаточно ли AI firewall для защиты RAG и агентов?
Нет оснований считать один фильтр достаточным для всех сценариев. Для RAG отдельно проверяют извлечённый контекст и права на данные, для агентов — авторизацию и параметры действий. Эффективность всей схемы проверяется на пилоте.

Хаб «Безопасность ИИ» на SecRadar

Каталог российских решений, документированные возможности и ограничения, разборы атак на ИИ.

Открыть хаб «Безопасность ИИ» →