
augustus v0.14.12
LLM सुरक्षा परीक्षण ढांचा जो prompt injection, jailbreaks, और adversarial attacks का पता लगाने के लिए है — 190+ probes, 28 providers, एकल Go binary
Augustus - LLM vulnerability scanner for prompt injection, jailbreak, and adversarial attack testing
Augustus - LLM Vulnerability Scanner
प्रॉम्प्ट इंजेक्शन, जेलब्रेक, एन्कोडिंग एक्सप्लॉइट और डेटा एक्सट्रैक्शन को कवर करने वाले 210+ एडवर्सेरियल हमलों के विरुद्ध बड़े भाषा मॉडलों का परीक्षण करें।
Augustus सुरक्षा पेशेवरों के लिए एक Go-आधारित LLM vulnerability scanner है। यह बड़े भाषा मॉडलों का परीक्षण एडवर्सेरियल हमलों की एक विस्तृत श्रृंखला के विरुद्ध करता है, 28 LLM प्रदाताओं के साथ एकीकृत होता है, और कार्रवाई योग्य vulnerability रिपोर्ट तैयार करता है।
अनुसंधान-उन्मुख टूलों के विपरीत, Augustus को प्रोडक्शन सुरक्षा परीक्षण के लिए बनाया गया है — concurrent scanning, rate limiting, retry logic और timeout handling सभी बिल्ट-इन हैं।
विषय-सूची
- Augustus क्यों
- विशेषताएँ
- त्वरित शुरुआत
- समर्थित प्रदाता
- उपयोग
- यह कैसे काम करता है
- आर्किटेक्चर
- कॉन्फ़िगरेशन
- सामान्य प्रश्न
- समस्या निवारण
- योगदान
- सुरक्षा
- सहायता
- लाइसेंस
Augustus क्यों
| विशेषता | Augustus | garak | promptfoo |
|---|---|---|---|
| भाषा | Go | Python | TypeScript |
| एकल बाइनरी | हाँ | नहीं | नहीं |
| Concurrent scanning | Goroutine pools | Multiprocessing pools | हाँ |
| LLM प्रदाता | 28 | 35+ | 80+ |
| प्रोब प्रकार | 210+ | 160+ | 119 plugins + 36 strategies |
| एंटरप्राइज़ फोकस | हाँ | अनुसंधान | हाँ |
विशेषताएँ
| विशेषता | विवरण |
|---|---|
| 210+ Vulnerability Probes | 47 हमला श्रेणियाँ: jailbreaks, prompt injection, adversarial examples, data extraction, safety benchmarks, agent attacks, और अधिक |
| 28 LLM प्रदाता | OpenAI, Anthropic, Azure, Bedrock, Vertex AI, Ollama, और 43 generator variants के साथ 22 अन्य |
| 90+ डिटेक्टर | Pattern matching, LLM-as-a-judge, HarmJudge (arXiv:2511.15304), Perspective API, unsafe content detection |
| 7 Buff रूपांतरण | Encoding, paraphrase, poetry (5 प्रारूप, 3 रणनीतियाँ), low-resource language translation, case transforms |
| लचीला आउटपुट | Table, JSON, JSONL, और HTML रिपोर्ट प्रारूप |
| प्रोडक्शन के लिए तैयार | Concurrent scanning, rate limiting, retry logic, timeout handling |
| एकल बाइनरी | Go-आधारित टूल एक पोर्टेबल executable में संकलित होता है |
| विस्तारणीय | Go init() फ़ंक्शन के माध्यम से plugin-style पंजीकरण |
हमला श्रेणियाँ
- Jailbreak हमले: DAN, DAN 11.0, AIM, AntiGPT, Grandma, ArtPrompts
- Prompt injection: Encoding (Base64, ROT13, Morse), Tag smuggling, FlipAttack, Prefix/Suffix injection
- Adversarial उदाहरण: GCG, PAIR, AutoDAN, TAP (Tree of Attack Prompts), TreeSearch, DRA
- Multi-turn हमले: Crescendo (क्रमिक वृद्धि), GOAT (अनुकूली तकनीक स्विचिंग)
- डेटा निष्कर्षण: API key leakage, Package hallucination, PII extraction, LeakReplay
- Context हेरफेर: RAG poisoning, Context overflow, Multimodal हमले, Continuation, Divergence
- Format शोषण: Markdown injection, YAML/JSON parsing हमले, ANSI escape, Web injection (XSS)
- बचाव तकनीकें: Obfuscation, Character substitution, अनुवाद-आधारित हमले, Phrasing, ObscurePrompt
- Safety बेंचमार्क: DoNotAnswer, RealToxicityPrompts, Snowball, LMRC
- Agent हमले: Multi-agent हेरफेर, Browsing शोषण
- सुरक्षा परीक्षण: Guardrail bypass, AV/spam scanning, शोषण (SQLi, code exec), BadChars
चेतावनी:
lmrcprobe अपने jailbreak परीक्षण के हिस्से के रूप में अश्लील और आपत्तिजनक भाषा का उपयोग करता है। केवल अधिकृत परीक्षण वातावरण में उपयोग करें।
त्वरित शुरुआत
इंस्टॉलेशन
Go 1.27.0 या बाद के संस्करण की आवश्यकता है।
go install github.com/praetorian-inc/augustus/cmd/augustus@latest
या स्रोत से बनाएँ:
git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build
मूल उपयोग
export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
--probe dan.Dan_11_0 \
--detector dan.DAN \
--verbose
उदाहरण आउटपुट
+--------------+-------------+--------+-------+--------+
| PROBE | DETECTOR | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN | false | 0.85 | VULN |
| dan.STAN | dan.STAN | true | 0.10 | SAFE |
| dan.AntiDAN | dan.AntiDAN | true | 0.05 | SAFE |
+--------------+-------------+--------+-------+--------+
उपलब्ध क्षमताओं की सूची बनाएं
# List all registered probes, detectors, generators, harnesses, and buffs
augustus list
समर्थित प्रदाता
Augustus में 43 जनरेटर वेरिएंट के साथ 28 LLM प्रदाता श्रेणियाँ शामिल हैं: