
augustus v0.14.12
Cadre de test de sécurité pour LLM pour détecter les injections de prompt, les jailbreaks et les attaques adversariales — 190+ sondes, 28 fournisseurs, un seul binaire Go
Augustus - scanner de vulnérabilités LLM pour les tests d
Augustus - Scanner de vulnérabilités LLM
Testez les grands modèles de langage face à plus de 210 attaques adversariales couvrant l'injection de prompt, les jailbreaks, les exploits d'encodage et l'extraction de données.
Augustus est un scanner de vulnérabilités LLM écrit en Go, destiné aux professionnels de la sécurité. Il teste les grands modèles de langage face à un large éventail d'attaques adversariales, s'intègre à 28 fournisseurs de LLM et produit des rapports de vulnérabilités exploitables.
Contrairement aux outils orientés recherche, Augustus est conçu pour les tests de sécurité en production — analyse concurrente, limitation de débit, logique de nouvelle tentative et gestion des délais d'attente sont fournis nativement.
Table des matières
- Pourquoi Augustus
- Fonctionnalités
- Démarrage rapide
- Fournisseurs pris en charge
- Utilisation
- Fonctionnement
- Architecture
- Configuration
- FAQ
- Dépannage
- Contribution
- Sécurité
- Support
- Licence
Pourquoi Augustus
| Fonctionnalité | Augustus | garak | promptfoo |
|---|---|---|---|
| Langage | Go | Python | TypeScript |
| Binaire unique | Oui | Non | Non |
| Analyse concurrente | Pools de goroutines | Pools de multiprocessing | Oui |
| Fournisseurs de LLM | 28 | 35+ | 80+ |
| Types de sondes | 210+ | 160+ | 119 plugins + 36 stratégies |
| Orientation entreprise | Oui | Recherche | Oui |
Fonctionnalités
| Fonctionnalité | Description |
|---|---|
| Plus de 210 sondes de vulnérabilité | 47 catégories d'attaques : jailbreaks, injection de prompt, exemples adversariaux, extraction de données, benchmarks de sûreté, attaques d'agents, et plus encore |
| 28 fournisseurs de LLM | OpenAI, Anthropic, Azure, Bedrock, Vertex AI, Ollama, et 22 autres avec 43 variantes de générateurs |
| Plus de 90 détecteurs | Correspondance de motifs, LLM-as-a-judge, HarmJudge (arXiv:2511.15304), Perspective API, détection de contenu dangereux |
| 7 transformations Buff | Encodage, paraphrase, poésie (5 formats, 3 stratégies), traduction en langues à faibles ressources, transformations de casse |
| Sortie flexible | Formats de rapport table, JSON, JSONL et HTML |
| Prêt pour la production | Analyse concurrente, limitation de débit, logique de nouvelle tentative, gestion des délais d'attente |
| Binaire unique | Outil basé sur Go compilé en un seul exécutable portable |
| Extensible | Enregistrement de type plugin via les fonctions Go init() |
Catégories d'attaques
- Attaques de type jailbreak : DAN, DAN 11.0, AIM, AntiGPT, Grandma, ArtPrompts
- Injection de prompt : Encodage (Base64, ROT13, Morse), contrebande de balises, FlipAttack, injection par préfixe/suffixe
- Exemples adversariaux : GCG, PAIR, AutoDAN, TAP (Tree of Attack Prompts), TreeSearch, DRA
- Attaques multi-tours : Crescendo (escalade progressive), GOAT (changement adaptatif de technique)
- Extraction de données : fuite de clés API, hallucination de paquets, extraction de données personnelles (PII), LeakReplay
- Manipulation de contexte : empoisonnement RAG, débordement de contexte, attaques multimodales, continuation, divergence
- Exploits de format : injection Markdown, attaques par analyse YAML/JSON, séquence d'échappement ANSI, injection web (XSS)
- Techniques d'évasion : obfuscation, substitution de caractères, attaques par traduction, reformulation, ObscurePrompt
- Bancs d'essai de sécurité : DoNotAnswer, RealToxicityPrompts, Snowball, LMRC
- Attaques d'agents : manipulation multi-agents, exploits de navigation
- Tests de sécurité : contournement de garde-fous, analyse AV/spam, exploitation (SQLi, exécution de code), BadChars
Avertissement : la sonde
lmrcutilise un langage profane et offensant dans le cadre de ses tests de jailbreak. À utiliser uniquement dans des environnements de test autorisés.
Démarrage rapide
Installation
Nécessite Go 1.27.0 ou une version ultérieure.
go install github.com/praetorian-inc/augustus/cmd/augustus@latest
Ou compiler depuis les sources :
git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build
Utilisation de base
export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
--probe dan.Dan_11_0 \
--detector dan.DAN \
--verbose
Exemple de sortie
+--------------+-------------+--------+-------+--------+
| PROBE | DETECTOR | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN | false | 0.85 | VULN |
| dan.STAN | dan.STAN | true | 0.10 | SAFE |
| dan.AntiDAN | dan.AntiDAN | true | 0.05 | SAFE |
+--------------+-------------+--------+-------+--------+
Lister les capacités disponibles
# List all registered probes, detectors, generators, harnesses, and buffs
augustus list
Fournisseurs pris en charge
Augustus inclut 28 catégories de fournisseurs de LLM avec 43 variantes de générateurs :