アップデート一覧に戻る
New releaseJul 28, 2026

augustus v0.14.12

LLMセキュリティテストフレームワーク — プロンプトインジェクション、ジェイルブレイク、敵対的攻撃を検出。190以上のプローブ、28のプロバイダ、単一のGoバイナリ。

共有

Augustus - プロンプトインジェクション、ジェイルブレイク、敵対的攻撃テスト向けLLM脆弱性スキャナー

Augustus - LLM脆弱性スキャナー

プロンプトインジェクション、ジェイルブレイク、エンコーディングエクスプロイト、データ抽出を網羅する210以上の敵対的攻撃に対して大規模言語モデルをテストします。

CI Go Version License Go Report Card GitHub Release

Augustus は、セキュリティ専門家向けのGoベースのLLM脆弱性スキャナーです。幅広い敵対的攻撃に対して大規模言語モデルをテストし、28のLLMプロバイダーと統合し、実用的な脆弱性レポートを生成します。

研究志向のツールとは異なり、Augustusは本番環境のセキュリティテスト向けに構築されています — 並行スキャン、レート制限、リトライロジック、タイムアウト処理が標準で備わっています。

目次

Augustusを選ぶ理由

機能Augustusgarakpromptfoo
言語GoPythonTypeScript
単一バイナリはいいいえいいえ
並行スキャンGoroutineプールマルチプロセスプールはい
LLMプロバイダー2835+80+
プローブタイプ210+160+119プラグイン + 36ストラテジー
エンタープライズ志向はい研究はい

機能

機能説明
210以上の脆弱性プローブ47の攻撃カテゴリ: ジェイルブレイク、プロンプトインジェクション、敵対的サンプル、データ抽出、安全性ベンチマーク、エージェント攻撃など
28のLLMプロバイダーOpenAI、Anthropic、Azure、Bedrock、Vertex AI、Ollama、および43のジェネレーターバリアントを持つその他22のプロバイダー
90以上の検出器パターンマッチング、LLM-as-a-judge、HarmJudge (arXiv:2511.15304)、Perspective API、不適切コンテンツ検出
7つのBuff変換エンコーディング、パラフレーズ、詩 (5形式、3ストラテジー)、低リソース言語翻訳、大文字小文字変換
柔軟な出力テーブル、JSON、JSONL、HTMLレポート形式
本番環境対応並行スキャン、レート制限、リトライロジック、タイムアウト処理
単一バイナリGoベースのツールは1つのポータブル実行ファイルにコンパイル
拡張可能Goのinit()関数によるプラグイン形式の登録

攻撃カテゴリ

  • ジェイルブレイク攻撃: DAN、DAN 11.0、AIM、AntiGPT、Grandma、ArtPrompts
  • プロンプトインジェクション: エンコーディング(Base64、ROT13、モールス信号)、タグスマグリング、FlipAttack、プレフィックス/サフィックスインジェクション
  • 敵対的サンプル: GCG、PAIR、AutoDAN、TAP(Tree of Attack Prompts)、TreeSearch、DRA
  • マルチターン攻撃: Crescendo(段階的エスカレーション)、GOAT(適応的テクニック切り替え)
  • データ抽出: APIキー漏洩、パッケージハルシネーション、PII抽出、LeakReplay
  • コンテキスト操作: RAGポイズニング、コンテキストオーバーフロー、マルチモーダル攻撃、継続、発散
  • フォーマットエクスプロイト: Markdownインジェクション、YAML/JSONパース攻撃、ANSIエスケープ、Webインジェクション(XSS)
  • 回避テクニック: 難読化、文字置換、翻訳ベースの攻撃、言い回し、ObscurePrompt
  • 安全性ベンチマーク: DoNotAnswer、RealToxicityPrompts、Snowball、LMRC
  • エージェント攻撃: マルチエージェント操作、ブラウジングエクスプロイト
  • セキュリティテスト: ガードレールバイパス、AV/スパムスキャン、エクスプロイト(SQLi、コード実行)、BadChars

警告: lmrc プローブはジェイルブレイクテストの一環として不敬で攻撃的な表現を使用します。認可されたテスト環境でのみ使用してください。

クイックスタート

インストール

Go 1.27.0 以降が必要です。

go install github.com/praetorian-inc/augustus/cmd/augustus@latest

ソースからビルドする場合:

git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build

基本的な使い方

export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
  --probe dan.Dan_11_0 \
  --detector dan.DAN \
  --verbose

出力例

+--------------+-------------+--------+-------+--------+
| PROBE        | DETECTOR    | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN     | false  | 0.85  | VULN   |
| dan.STAN     | dan.STAN    | true   | 0.10  | SAFE   |
| dan.AntiDAN  | dan.AntiDAN | true   | 0.05  | SAFE   |
+--------------+-------------+--------+-------+--------+

利用可能な機能の一覧表示

# List all registered probes, detectors, generators, harnesses, and buffs
augustus list

対応プロバイダー

Augustusには、43のジェネレーターバリアントを備えた28のLLMプロバイダーカテゴリが含まれています:

プロバイダージェネレーター名備考
OpenAIopenai.OpenAI、openai.OpenAIReasoningGPT-3.5、GPT-4、GPT-4 Turbo、o1/o3推論モデル
Anthropicanthropic.AnthropicClaude 3/3.5/4(Opus、Sonnet、Haiku)
Azure OpenAIazure.AzureOpenAIAzureホストのOpenAIモデル
AWS Bedrockbedrock.BedrockClaude、Llama、Titanモデル
Google Vertex AIvertex.VertexPaLM、Geminiモデル
Coherecohere.CohereCommand、Command Rモデル
Replicatereplicate.Replicateクラウドホストのオープンモデル
HuggingFacehuggingface.InferenceAPI、huggingface.InferenceEndpoint、huggingface.Pipeline、huggingface.LLaVAHF Inference API、エンドポイント、パイプライン、マルチモーダル
Together AItogether.TogetherOSSモデル向け高速推論
Anyscaleanyscale.AnyscaleLlamaおよびMistralのホスティング
Groqgroq.Groq超高速LPU推論
Mistralmistral.MistralMistral APIモデル
Fireworksfireworks.Fireworks本番推論プラットフォーム
DeepInfradeepinfra.DeepInfraサーバーレスGPU推論
NVIDIA NIMnim.NIM、nim.NVOpenAICompletion、nim.NVMultimodal、nim.VisionNVIDIA AIエンドポイント、マルチモーダル
NVIDIA NeMonemo.NeMoNVIDIA NeMoフレームワーク
NVIDIA NVCFnvcf.NvcfChat、nvcf.NvcfCompletionNVIDIA Cloud Functions
NeMo Guardrailsguardrails.NeMoGuardrailsNVIDIA NeMo Guardrails
IBM watsonxwatsonx.WatsonXIBM watsonx.aiプラットフォーム
LangChainlangchain.LangChainLangChain LLMラッパー
LangChain Servelangchain_serve.LangChainServeLangChain Serveエンドポイント
Rasarasa.RasaRestRasa対話型AI
GGMLggml.GgmlGGMLローカルモデル推論
Functionfunction.Single、function.Multipleカスタム関数ジェネレーター
Ollamaollama.Ollama、ollama.OllamaChatローカルモデルホスティング
LiteLLMlitellm.LiteLLM統合APIプロキシ
REST APIrest.RestカスタムRESTエンドポイント(SSEサポート)
Testtest.Blank、test.Repeat、test.Lipsum、test.Nones、test.Single、test.BlankVisionテストおよび開発

すべてのプロバイダーはコンパイル済みバイナリで利用可能です。環境変数またはYAML設定ファイルで構成します。セットアップの詳細については構成を参照してください。

使用方法

単一プローブ

# Test for DAN jailbreak
augustus scan openai.OpenAI \
  --probe dan.Dan_11_0 \
  --detector dan.DAN \
  --config-file config.yaml \
  --verbose

複数のプローブ

# Use glob patterns to run related probes
augustus scan openai.OpenAI \
  --probes-glob "dan.*,goodside.*,grandma.*" \
  --detectors-glob "*" \
  --config-file config.yaml \
  --output batch-results.jsonl

# Run all probes against Claude
augustus scan anthropic.Anthropic \
  --all \
  --config '{"model":"claude-3-opus-20240229"}' \
  --timeout 60m \
  --output comprehensive-scan.jsonl \
  --html comprehensive-report.html

バッファ変換

プロンプト変換を適用して回避手法をテストします:

# Apply base64 encoding buff to all probes
augustus scan openai.OpenAI \
  --all \
  --buff encoding.Base64 \
  --config '{"model":"gpt-4"}'

# Apply poetry transformation
augustus scan anthropic.Anthropic \
  --probes-glob "dan.*" \
  --buff poetry.MetaPrompt \
  --config '{"model":"claude-3-opus-20240229"}'

カテゴリ