
New releaseJul 28, 2026
augustus v0.14.12
LLMセキュリティテストフレームワーク — プロンプトインジェクション、ジェイルブレイク、敵対的攻撃を検出。190以上のプローブ、28のプロバイダ、単一のGoバイナリ。
Augustus - プロンプトインジェクション、ジェイルブレイク、敵対的攻撃テスト向けLLM脆弱性スキャナー
Augustus - LLM脆弱性スキャナー
プロンプトインジェクション、ジェイルブレイク、エンコーディングエクスプロイト、データ抽出を網羅する210以上の敵対的攻撃に対して大規模言語モデルをテストします。
Augustus は、セキュリティ専門家向けのGoベースのLLM脆弱性スキャナーです。幅広い敵対的攻撃に対して大規模言語モデルをテストし、28のLLMプロバイダーと統合し、実用的な脆弱性レポートを生成します。
研究志向のツールとは異なり、Augustusは本番環境のセキュリティテスト向けに構築されています — 並行スキャン、レート制限、リトライロジック、タイムアウト処理が標準で備わっています。
目次
Augustusを選ぶ理由
| 機能 | Augustus | garak | promptfoo |
|---|---|---|---|
| 言語 | Go | Python | TypeScript |
| 単一バイナリ | はい | いいえ | いいえ |
| 並行スキャン | Goroutineプール | マルチプロセスプール | はい |
| LLMプロバイダー | 28 | 35+ | 80+ |
| プローブタイプ | 210+ | 160+ | 119プラグイン + 36ストラテジー |
| エンタープライズ志向 | はい | 研究 | はい |
機能
| 機能 | 説明 |
|---|---|
| 210以上の脆弱性プローブ | 47の攻撃カテゴリ: ジェイルブレイク、プロンプトインジェクション、敵対的サンプル、データ抽出、安全性ベンチマーク、エージェント攻撃など |
| 28のLLMプロバイダー | OpenAI、Anthropic、Azure、Bedrock、Vertex AI、Ollama、および43のジェネレーターバリアントを持つその他22のプロバイダー |
| 90以上の検出器 | パターンマッチング、LLM-as-a-judge、HarmJudge (arXiv:2511.15304)、Perspective API、不適切コンテンツ検出 |
| 7つのBuff変換 | エンコーディング、パラフレーズ、詩 (5形式、3ストラテジー)、低リソース言語翻訳、大文字小文字変換 |
| 柔軟な出力 | テーブル、JSON、JSONL、HTMLレポート形式 |
| 本番環境対応 | 並行スキャン、レート制限、リトライロジック、タイムアウト処理 |
| 単一バイナリ | Goベースのツールは1つのポータブル実行ファイルにコンパイル |
| 拡張可能 | Goのinit()関数によるプラグイン形式の登録 |
攻撃カテゴリ
- ジェイルブレイク攻撃: DAN、DAN 11.0、AIM、AntiGPT、Grandma、ArtPrompts
- プロンプトインジェクション: エンコーディング(Base64、ROT13、モールス信号)、タグスマグリング、FlipAttack、プレフィックス/サフィックスインジェクション
- 敵対的サンプル: GCG、PAIR、AutoDAN、TAP(Tree of Attack Prompts)、TreeSearch、DRA
- マルチターン攻撃: Crescendo(段階的エスカレーション)、GOAT(適応的テクニック切り替え)
- データ抽出: APIキー漏洩、パッケージハルシネーション、PII抽出、LeakReplay
- コンテキスト操作: RAGポイズニング、コンテキストオーバーフロー、マルチモーダル攻撃、継続、発散
- フォーマットエクスプロイト: Markdownインジェクション、YAML/JSONパース攻撃、ANSIエスケープ、Webインジェクション(XSS)
- 回避テクニック: 難読化、文字置換、翻訳ベースの攻撃、言い回し、ObscurePrompt
- 安全性ベンチマーク: DoNotAnswer、RealToxicityPrompts、Snowball、LMRC
- エージェント攻撃: マルチエージェント操作、ブラウジングエクスプロイト
- セキュリティテスト: ガードレールバイパス、AV/スパムスキャン、エクスプロイト(SQLi、コード実行)、BadChars
警告:
lmrcプローブはジェイルブレイクテストの一環として不敬で攻撃的な表現を使用します。認可されたテスト環境でのみ使用してください。
クイックスタート
インストール
Go 1.27.0 以降が必要です。
go install github.com/praetorian-inc/augustus/cmd/augustus@latest
ソースからビルドする場合:
git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build
基本的な使い方
export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
--probe dan.Dan_11_0 \
--detector dan.DAN \
--verbose
出力例
+--------------+-------------+--------+-------+--------+
| PROBE | DETECTOR | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN | false | 0.85 | VULN |
| dan.STAN | dan.STAN | true | 0.10 | SAFE |
| dan.AntiDAN | dan.AntiDAN | true | 0.05 | SAFE |
+--------------+-------------+--------+-------+--------+
利用可能な機能の一覧表示
# List all registered probes, detectors, generators, harnesses, and buffs
augustus list
対応プロバイダー
Augustusには、43のジェネレーターバリアントを備えた28のLLMプロバイダーカテゴリが含まれています:
| プロバイダー | ジェネレーター名 | 備考 |
|---|---|---|
| OpenAI | openai.OpenAI、openai.OpenAIReasoning | GPT-3.5、GPT-4、GPT-4 Turbo、o1/o3推論モデル |
| Anthropic | anthropic.Anthropic | Claude 3/3.5/4(Opus、Sonnet、Haiku) |
| Azure OpenAI | azure.AzureOpenAI | AzureホストのOpenAIモデル |
| AWS Bedrock | bedrock.Bedrock | Claude、Llama、Titanモデル |
| Google Vertex AI | vertex.Vertex | PaLM、Geminiモデル |
| Cohere | cohere.Cohere | Command、Command Rモデル |
| Replicate | replicate.Replicate | クラウドホストのオープンモデル |
| HuggingFace | huggingface.InferenceAPI、huggingface.InferenceEndpoint、huggingface.Pipeline、huggingface.LLaVA | HF Inference API、エンドポイント、パイプライン、マルチモーダル |
| Together AI | together.Together | OSSモデル向け高速推論 |
| Anyscale | anyscale.Anyscale | LlamaおよびMistralのホスティング |
| Groq | groq.Groq | 超高速LPU推論 |
| Mistral | mistral.Mistral | Mistral APIモデル |
| Fireworks | fireworks.Fireworks | 本番推論プラットフォーム |
| DeepInfra | deepinfra.DeepInfra | サーバーレスGPU推論 |
| NVIDIA NIM | nim.NIM、nim.NVOpenAICompletion、nim.NVMultimodal、nim.Vision | NVIDIA AIエンドポイント、マルチモーダル |
| NVIDIA NeMo | nemo.NeMo | NVIDIA NeMoフレームワーク |
| NVIDIA NVCF | nvcf.NvcfChat、nvcf.NvcfCompletion | NVIDIA Cloud Functions |
| NeMo Guardrails | guardrails.NeMoGuardrails | NVIDIA NeMo Guardrails |
| IBM watsonx | watsonx.WatsonX | IBM watsonx.aiプラットフォーム |
| LangChain | langchain.LangChain | LangChain LLMラッパー |
| LangChain Serve | langchain_serve.LangChainServe | LangChain Serveエンドポイント |
| Rasa | rasa.RasaRest | Rasa対話型AI |
| GGML | ggml.Ggml | GGMLローカルモデル推論 |
| Function | function.Single、function.Multiple | カスタム関数ジェネレーター |
| Ollama | ollama.Ollama、ollama.OllamaChat | ローカルモデルホスティング |
| LiteLLM | litellm.LiteLLM | 統合APIプロキシ |
| REST API | rest.Rest | カスタムRESTエンドポイント(SSEサポート) |
| Test | test.Blank、test.Repeat、test.Lipsum、test.Nones、test.Single、test.BlankVision | テストおよび開発 |
すべてのプロバイダーはコンパイル済みバイナリで利用可能です。環境変数またはYAML設定ファイルで構成します。セットアップの詳細については構成を参照してください。
使用方法
単一プローブ
# Test for DAN jailbreak
augustus scan openai.OpenAI \
--probe dan.Dan_11_0 \
--detector dan.DAN \
--config-file config.yaml \
--verbose
複数のプローブ
# Use glob patterns to run related probes
augustus scan openai.OpenAI \
--probes-glob "dan.*,goodside.*,grandma.*" \
--detectors-glob "*" \
--config-file config.yaml \
--output batch-results.jsonl
# Run all probes against Claude
augustus scan anthropic.Anthropic \
--all \
--config '{"model":"claude-3-opus-20240229"}' \
--timeout 60m \
--output comprehensive-scan.jsonl \
--html comprehensive-report.html
バッファ変換
プロンプト変換を適用して回避手法をテストします:
# Apply base64 encoding buff to all probes
augustus scan openai.OpenAI \
--all \
--buff encoding.Base64 \
--config '{"model":"gpt-4"}'
# Apply poetry transformation
augustus scan anthropic.Anthropic \
--probes-glob "dan.*" \
--buff poetry.MetaPrompt \
--config '{"model":"claude-3-opus-20240229"}'