радарная панель и доля отражённых атак по каждой категории, среднее число ходов до пробоя в многоходовых сценариях, единый журнал прогонов PyRIT и Garak
Ручной и автоматизированный red-teaming
9 типов атак (от прямой отправки промпта до многоходовой эскалации), с историей диалога и автоматической оценкой результата
Сканер уязвимостей
175+ структурированных проб по категориям атак, параллельное выполнение
Пакетное тестирование
до 53 наборов данных, матричный запуск нескольких целей против нескольких типов атак одновременно
Сценарии использования
(СЦЕНАРИЙ #1)
Ручной red-teaming специалистом по безопасности
интерактивное исследование конкретной уязвимости с ветвлением диалога и точечным подбором техники обхода защиты
(СЦЕНАРИЙ #2)
Регуляторный и внутренний комплаенс-отчёт
генерация отчёта с классификацией по OWASP LLM Top 10 для внутреннего аудита безопасности или в рамках требований регулятора
(СЦЕНАРИЙ #3)
Аудит перед выводом агента в продуктив
полный прогон сканера уязвимостей и набора атак со структурированным отчётом до релиза
(СЦЕНАРИЙ #4)
Сравнение версий моделей перед обновлением
прогон одного и того же набора атак на старую и новую версию модели, чтобы убедиться в отсутствии регресса по устойчивости
(СЦЕНАРИЙ #5)
Оценка сторонних моделей перед выбором
сравнение нескольких LLM-кандидатов (open-source или от разных провайдеров) по единому набору атак, чтобы выбрать модель для продакшена не только по качеству ответов, но и по устойчивости
(СЦЕНАРИЙ #6)
Проверка после дообучения/fine-tuning
прогон полного набора атак на модели после дообучения на клиентских данных, чтобы убедиться, что кастомизация не снизила защищённость