
augustus v0.14.30
Framework di test di sicurezza per LLM per rilevare iniezioni di prompt, jailbreak e attacchi avversari — oltre 190 sonde, 28 fornitori, un singolo binario Go
Augustus - LLM vulnerability scanner for prompt injection, jailbreak, and adversarial attack testing
Augustus - Scanner di vulnerabilità per LLM
Metti alla prova i modelli linguistici di grandi dimensioni contro oltre 210 attacchi adversariali che coprono prompt injection, jailbreak, exploit di codifica ed estrazione di dati.
Augustus è uno scanner di vulnerabilità per LLM basato su Go, pensato per i professionisti della sicurezza. Mette alla prova i modelli linguistici di grandi dimensioni contro un'ampia gamma di attacchi adversariali, si integra con 28 provider LLM e produce report di vulnerabilità concreti e utilizzabili.
A differenza degli strumenti orientati alla ricerca, Augustus è progettato per il security testing in produzione: scansione concorrente, rate limiting, logica di retry e gestione dei timeout sono inclusi di serie.
Indice
- Perché Augustus
- Funzionalità
- Avvio rapido
- Provider supportati
- Utilizzo
- Come funziona
- Architettura
- Configurazione
- FAQ
- Risoluzione dei problemi
- Contribuire
- Sicurezza
- Supporto
- Licenza
Perché Augustus
| Funzionalità | Augustus | garak | promptfoo |
|---|---|---|---|
| Linguaggio | Go | Python | TypeScript |
| Binario singolo | Sì | No | No |
| Scansione concorrente | Pool di goroutine | Pool multiprocessing | Sì |
| Provider LLM | 28 | 35+ | 80+ |
| Tipi di probe | 210+ | 160+ | 119 plugin + 36 strategie |
| Focus enterprise | Sì | Ricerca | Sì |
Funzionalità
| Funzionalità | Descrizione |
|---|---|
| Oltre 210 probe di vulnerabilità | 47 categorie di attacco: jailbreak, prompt injection, esempi adversariali, estrazione di dati, benchmark di sicurezza, attacchi agli agenti e altro ancora |
| 28 provider LLM | OpenAI, Anthropic, Azure, Bedrock, Vertex AI, Ollama e altri 22, con 43 varianti di generator |
| Oltre 90 detector | Pattern matching, LLM-as-a-judge, HarmJudge (arXiv:2511.15304), Perspective API, rilevamento di contenuti non sicuri |
| 7 trasformazioni Buff | Codifica, parafrasi, poesia (5 formati, 3 strategie), traduzione in lingue a basse risorse, trasformazioni di maiuscole/minuscole |
| Output flessibile | Formati di report tabella, JSON, JSONL e HTML |
| Pronto per la produzione | Scansione concorrente, rate limiting, logica di retry, gestione dei timeout |
| Binario singolo | Lo strumento basato su Go si compila in un unico eseguibile portabile |
| Estensibile | Registrazione in stile plugin tramite funzioni init() di Go |
Categorie di attacco
- Attacchi jailbreak: DAN, DAN 11.0, AIM, AntiGPT, Grandma, ArtPrompts
- Prompt injection: Encoding (Base64, ROT13, Morse), Tag smuggling, FlipAttack, Prefix/Suffix injection
- Esempi avversariali: GCG, PAIR, AutoDAN, TAP (Tree of Attack Prompts), TreeSearch, DRA
- Attacchi multi-turn: Crescendo (escalation graduale), GOAT (commutazione adattiva delle tecniche)
- Estrazione dati: API key leakage, Package hallucination, PII extraction, LeakReplay
- Manipolazione del contesto: RAG poisoning, Context overflow, Attacchi multimodali, Continuation, Divergence
- Exploit di formato: Markdown injection, attacchi di parsing YAML/JSON, ANSI escape, Web injection (XSS)
- Tecniche di evasione: Obfuscation, Character substitution, attacchi basati sulla traduzione, Phrasing, ObscurePrompt
- Benchmark di sicurezza: DoNotAnswer, RealToxicityPrompts, Snowball, LMRC
- Attacchi agli agenti: Multi-agent manipulation, Browsing exploits
- Security testing: Guardrail bypass, AV/spam scanning, Exploitation (SQLi, code exec), BadChars
Avvertenza: la probe
lmrcutilizza linguaggio volgare e offensivo nell'ambito dei suoi test di jailbreak. Utilizzare solo in ambienti di test autorizzati.
Avvio rapido
Installazione
Richiede Go 1.27.0 o versione successiva.
go install github.com/praetorian-inc/augustus/cmd/augustus@latest
Oppure compila dal codice sorgente:
git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build
Utilizzo di base
export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
--probe dan.Dan_11_0 \
--detector dan.DAN \
--verbose
Output di esempio
+--------------+-------------+--------+-------+--------+
| PROBE | DETECTOR | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN | false | 0.85 | VULN |
| dan.STAN | dan.STAN | true | 0.10 | SAFE |
| dan.AntiDAN | dan.AntiDAN | true | 0.05 | SAFE |
+--------------+-------------+--------+-------+--------+
Elenca le capacità disponibili
# List all registered probes, detectors, generators, harnesses, and buffs
augustus list
Provider supportati
Augustus include 28 categorie di provider LLM con 43 varianti di generator: