
LLMs के विरुद्ध jailbreak हमलों की सफलता दरों (ASR और stepwise ASR) को मापने के लिए शोध कोड, जिसमें GCG जैसे हमलों के कार्यान्वयन और मूल्यांकन स्क्रिप्ट शामिल हैं।
पेपर के लिए कोड: http://arxiv.org/abs/2610.26589, NAACL'27 में सबमिट किया गया।
uv sync चलाएँsource .venv/bin/activate चलाएँuv pip list चलाएँ। यदि सूची खाली हो तो uv ट्रबलशूटिंग का पालन करें।अब आप स्क्रिप्ट चलाने के लिए तैयार हैं!
Eval स्क्रिप्ट:
jailbreak.py- बेसलाइन और स्टेपवाइज़ ASR स्कोर की गणना करने के लिए
uv run attacks/GCG/main.py
ASR और ASR_Step गणना (डिफ़ॉल्ट: Vicuna): uv run scripts/jailbreak.py
ARGS प्रत्येक स्क्रिप्ट में निर्दिष्ट हैं।