업데이트로 돌아가기
New releaseJul 27, 2026

augustus v0.14.11

프롬프트 인젝션, 탈옥 및 적대적 공격을 탐지하기 위한 LLM 보안 테스트 프레임워크 — 190개 이상의 프로브, 28개 제공자, 단일 Go 바이너리

공유

Augustus - 프롬프트 인젝션, 탈옥 및 적대적 공격 테스트를 위한 LLM 취약점 스캐너

Augustus - LLM 취약점 스캐너

프롬프트 인젝션, 탈옥, 인코딩 익스플로잇, 데이터 추출을 아우르는 210개 이상의 적대적 공격에 대해 대규모 언어 모델을 테스트합니다.

CI Go Version License Go Report Card GitHub Release

Augustus는 보안 전문가를 위한 Go 기반 LLM 취약점 스캐너입니다. 광범위한 적대적 공격에 대해 대규모 언어 모델을 테스트하고, 28개의 LLM 제공자와 통합되며, 실행 가능한 취약점 보고서를 생성합니다.

연구 지향 도구와 달리 Augustus는 프로덕션 보안 테스트를 위해 설계되었습니다. 동시 스캐닝, 속도 제한, 재시도 로직, 타임아웃 처리가 기본으로 제공됩니다.

목차

Augustus를 선택하는 이유

기능Augustusgarakpromptfoo
언어GoPythonTypeScript
단일 바이너리예아니요아니요
동시 스캐닝Goroutine 풀멀티프로세싱 풀예
LLM 제공자2835+80+
프로브 유형210+160+119개 플러그인 + 36개 전략
엔터프라이즈 중심예연구예

기능

기능설명
210개 이상의 취약점 프로브47개 공격 카테고리: 탈옥, 프롬프트 인젝션, 적대적 예제, 데이터 추출, 안전 벤치마크, 에이전트 공격 등
28개 LLM 제공자OpenAI, Anthropic, Azure, Bedrock, Vertex AI, Ollama 및 43개 생성기 변형을 갖춘 22개 추가 제공자
90개 이상의 탐지기패턴 매칭, LLM-as-a-judge, HarmJudge (arXiv:2511.15304), Perspective API, 유해 콘텐츠 탐지
7개 Buff 변환인코딩, 패러프레이즈, 시(5개 형식, 3개 전략), 저자원 언어 번역, 대소문자 변환
유연한 출력테이블, JSON, JSONL, HTML 보고서 형식
프로덕션 준비 완료동시 스캐닝, 속도 제한, 재시도 로직, 타임아웃 처리
단일 바이너리Go 기반 도구가 하나의 휴대용 실행 파일로 컴파일됨
확장 가능Go init() 함수를 통한 플러그인 스타일 등록

공격 카테고리

  • 탈옥 공격: DAN, DAN 11.0, AIM, AntiGPT, Grandma, ArtPrompts
  • 프롬프트 인젝션: 인코딩(Base64, ROT13, Morse), 태그 스머글링, FlipAttack, 접두사/접미사 인젝션
  • 적대적 예제: GCG, PAIR, AutoDAN, TAP(Tree of Attack Prompts), TreeSearch, DRA
  • 멀티턴 공격: Crescendo(점진적 에스컬레이션), GOAT(적응형 기법 전환)
  • 데이터 추출: API 키 유출, 패키지 환각, PII 추출, LeakReplay
  • 컨텍스트 조작: RAG 포이즈닝, 컨텍스트 오버플로, 멀티모달 공격, 이어쓰기, 분기
  • 형식 익스플로잇: Markdown 인젝션, YAML/JSON 파싱 공격, ANSI 이스케이프, 웹 인젝션(XSS)
  • 회피 기법: 난독화, 문자 치환, 번역 기반 공격, 표현 변경, ObscurePrompt
  • 안전성 벤치마크: DoNotAnswer, RealToxicityPrompts, Snowball, LMRC
  • 에이전트 공격: 멀티 에이전트 조작, 브라우징 익스플로잇
  • 보안 테스트: 가드레일 우회, AV/스팸 스캐닝, 익스플로잇(SQLi, 코드 실행), BadChars

경고: lmrc 프로브는 탈옥 테스트의 일환으로 욕설 및 공격적인 언어를 사용합니다. 승인된 테스트 환경에서만 사용하십시오.

빠른 시작

설치

Go 1.27.0 이상이 필요합니다.

go install github.com/praetorian-inc/augustus/cmd/augustus@latest

소스에서 빌드하거나:

git clone https://github.com/praetorian-inc/augustus.git
cd augustus
make build

기본 사용법

export OPENAI_API_KEY="your-api-key"
augustus scan openai.OpenAI \
  --probe dan.Dan_11_0 \
  --detector dan.DAN \
  --verbose

출력 예시

+--------------+-------------+--------+-------+--------+
| PROBE        | DETECTOR    | PASSED | SCORE | STATUS |
+--------------+-------------+--------+-------+--------+
| dan.Dan_11_0 | dan.DAN     | false  | 0.85  | VULN   |
| dan.STAN     | dan.STAN    | true   | 0.10  | SAFE   |
| dan.AntiDAN  | dan.AntiDAN | true   | 0.05  | SAFE   |
+--------------+-------------+--------+-------+--------+

사용 가능한 기능 목록

# List all registered probes, detectors, generators, harnesses, and buffs
augustus list

지원되는 제공자

Augustus에는 43개의 생성기 변형이 포함된 28개의 LLM 제공자 카테고리가 포함되어 있습니다:

제공자생성기 이름비고
OpenAIopenai.OpenAI, openai.OpenAIReasoningGPT-3.5, GPT-4, GPT-4 Turbo, o1/o3 추론 모델
Anthropicanthropic.AnthropicClaude 3/3.5/4 (Opus, Sonnet, Haiku)
Azure OpenAIazure.AzureOpenAIAzure 호스팅 OpenAI 모델
AWS Bedrockbedrock.BedrockClaude, Llama, Titan 모델
Google Vertex AIvertex.VertexPaLM, Gemini 모델
Coherecohere.CohereCommand, Command R 모델
Replicatereplicate.Replicate클라우드 호스팅 오픈 모델
HuggingFacehuggingface.InferenceAPI, huggingface.InferenceEndpoint, huggingface.Pipeline, huggingface.LLaVAHF Inference API, 엔드포인트, 파이프라인, 멀티모달
Together AItogether.TogetherOSS 모델을 위한 빠른 추론
Anyscaleanyscale.AnyscaleLlama 및 Mistral 호스팅
Groqgroq.Groq초고속 LPU 추론
Mistralmistral.MistralMistral API 모델
Fireworksfireworks.Fireworks프로덕션 추론 플랫폼
DeepInfradeepinfra.DeepInfra서버리스 GPU 추론
NVIDIA NIMnim.NIM, nim.NVOpenAICompletion, nim.NVMultimodal, nim.VisionNVIDIA AI 엔드포인트, 멀티모달
NVIDIA NeMonemo.NeMoNVIDIA NeMo 프레임워크
NVIDIA NVCFnvcf.NvcfChat, nvcf.NvcfCompletionNVIDIA Cloud Functions
NeMo Guardrailsguardrails.NeMoGuardrailsNVIDIA NeMo Guardrails
IBM watsonxwatsonx.WatsonXIBM watsonx.ai 플랫폼
LangChainlangchain.LangChainLangChain LLM 래퍼
LangChain Servelangchain_serve.LangChainServeLangChain Serve 엔드포인트
Rasarasa.RasaRestRasa 대화형 AI
GGMLggml.GgmlGGML 로컬 모델 추론
Functionfunction.Single, function.Multiple사용자 정의 함수 생성기
Ollamaollama.Ollama, ollama.OllamaChat로컬 모델 호스팅
LiteLLMlitellm.LiteLLM통합 API 프록시
REST APIrest.Rest사용자 정의 REST 엔드포인트 (SSE 지원)
Testtest.Blank, test.Repeat, test.Lipsum, test.Nones, test.Single, test.BlankVision테스트 및 개발

모든 제공자는 컴파일된 바이너리에서 사용할 수 있습니다. 환경 변수 또는 YAML 구성 파일을 통해 구성하십시오. 설정 세부 사항은 구성을 참조하십시오.

사용법

단일 프로브

# Test for DAN jailbreak
augustus scan openai.OpenAI \
  --probe dan.Dan_11_0 \
  --detector dan.DAN \
  --config-file config.yaml \
  --verbose

다중 프로브

# Use glob patterns to run related probes
augustus scan openai.OpenAI \
  --probes-glob "dan.*,goodside.*,grandma.*" \
  --detectors-glob "*" \
  --config-file config.yaml \
  --output batch-results.jsonl

# Run all probes against Claude
augustus scan anthropic.Anthropic \
  --all \
  --config '{"model":"claude-3-opus-20240229"}' \
  --timeout 60m \
  --output comprehensive-scan.jsonl \
  --html comprehensive-report.html

버프 변환

프롬프트 변환을 적용하여 회피 기법을 테스트합니다:

# Apply base64 encoding buff to all probes
augustus scan openai.OpenAI \
  --all \
  --buff encoding.Base64 \
  --config '{"model":"gpt-4"}'

# Apply poetry transformation
augustus scan anthropic.Anthropic \
  --probes-glob "dan.*" \
  --buff poetry.MetaPrompt \
  --config '{"model":"claude-3-opus-20240229"}'

# Chain multiple buffs
augustus scan openai.OpenAI \
  --all \
  --buffs-glob "encoding.*,paraphrase.*" \
  --output buffed-results.jsonl

출력 형식

카테고리