Skip to content
KitploitKITPLOIT
أدواتعمليات الاستغلالالمدونة
Log in
إرسال
أدواتعمليات الاستغلالالمدونة
إرسال

أدوات الاختراق واختبار الاختراق والأمن السيبراني لترسانتك الأمنية!

Kitploit هو دليل لأدوات الاختراق والأمن السيبراني واختبار الاختراق. اكتشف آخر تحديثات المشاريع للعثور على الثغرات وتحليل الأنظمة وأتمتة الاختبارات وتعزيز أمنك.

الخلاصاتاتصالالخصوصية© 2026 Kitploit

دليل الأدوات

الفئات

عرض جميع الفئات
Loading categories
AuthorizationBench — [🎖️ إشادة شرفية في HAIPS @COLM'26] أول معيار تقييم لقياس مدى تصرف وكلاء نماذج اللغة الكبيرة (LLM) بما يتوافق مع نطاق التفويض الممنوح لهم. | Kitploit
أدوات/GitHubGitHub/peach-research-lab/authorizationbench
المصادقة والترخيصالتحليل الديناميكي (عزل)استخبارات التهديداتالأوراق والأبحاثالتعلم والتعليمالفريق الأحمرأمن الذكاء الاصطناعيمختبرات وتدريب عملي
مشاركة
GitHub
peach-research-lab/authorizationbench

AuthorizationBench

[🎖️ إشادة شرفية في HAIPS @COLM'26] أول معيار تقييم لقياس مدى تصرف وكلاء نماذج اللغة الكبيرة (LLM) بما يتوافق مع نطاق التفويض الممنوح لهم.

عرض المستودع
6294منذ 6 أياملم تتم المراجعة بعد

AuthorizationBench:
قياس محاذاة تفويض وكلاء النماذج اللغوية الكبيرة

Paper Construction pipeline Environment pressure, harm, and domain Agent Trajectories incoming

أول إطار منهجي لتقييم محاذاة تفويض وكلاء النماذج اللغوية الكبيرة في ظل التفويض الحميد،
سواء ترتبت على ذلك عواقب ضارة مباشرة أو لم تترتب.


نظرة عامة

يغطي AuthorizationBench الإجراءات الخارجة عن التفويض مع وجود ضرر مباشر على السلامة أو بدونه. التقييم القائم على العواقب يفوّت الربع الذي لا يوجد فيه ضرر مباشر.

يُعدّ التصرف ضمن نطاق التفويض المحدد أبسط واجبات الوكيل في علاقة التفويض بين الإنسان والوكيل. تمنح معظم معايير تقييم الوكلاء مكافأة على إنجاز المهمة أو تقيّم ما إذا كان الإجراء يُنتج ضررًا مباشرًا. غير أن الوكيل، بمجرد أن يتصرف خارج ذلك النطاق، يقوّض سيطرة المفوِّض وعلاقة التفويض نفسها، سواء تبع ذلك ضرر مباشر أم لا. ونادرًا ما تلتقط المعايير الحالية هذا الإخفاق.

يتضمن الإطار ثلاثة مكونات:

  • AuthorizationBench، المعيار: 286 مهمة قابلة للتنفيذ مستندة إلى حالات واقعية موثّقة وتشمل ثلاثة أبعاد:
    • 14 ضغطًا ظرفيًا، منها 12 ضغطًا حميدًا وآليتا حقن أوامر خبيثتان
    • وجود عواقب ضارة مباشرة أو غيابها، محددة بعشر فئات للسلامة والخصوصية مجمّعة من الأعمال السابقة في سلامة الوكلاء.
    • 10 مجالات تشمل الحياة الشخصية والعمل المهني.
  • بيئة اختبار معزولة تراعي التفويض: خدمات وهمية حتمية تُبقي المسارات المفوّضة والخارجة عن التفويض قابلة للتنفيذ والملاحظة معًا، مع محوّلات لـ OpenHands وOpenAI Agents SDK وClaude Agent SDK.
  • خط أنابيب بناء قابل للتوسع: مسار قانوني من البذرة إلى المهمة وتوسيع سياقي.

تقييم AuthorizationBench

تتحول حالة موثّقة إلى مهمة قابلة للتنفيذ مع عقد تفويض

تُترجم الحالة الموثّقة إلى مهمة يكون فيها مسار الإنجاز المفوّض والمسار الخارج عن التفويض الخاص بالحالة قابلين للتنفيذ معًا. يعمل الوكيل في البيئة المعزولة، ويُقيَّم مساره الفعلي وحالته الناتجة مقابل عقد التفويض.

نقيّم أربعة نماذج بمستويي جهد استدلالي منخفض ومرتفع عبر ثلاثة أُطر تشغيل للوكلاء، منتجين 6,864 مسارًا. يتصرف الوكلاء خارج التفويض في 19.2% من المهام المفوّضة.

عبر 91 زوجًا من المهام المتطابقة، تحدث نحو 54% من عمليات الخروج عن التفويض المرصودة في النسخة التي لا يوجد فيها ضرر مباشر على السلامة أو الخصوصية. بعبارة أخرى، ضمن هذه الأزواج، كان أكثر من نصف سلوك الخروج عن التفويض سيُغفل من قبل تقييم يبحث فقط عن العواقب الضارة المباشرة.

نتائج الإنجاز والتفويض عبر 24 تهيئة

بنية المستودع

authorization_eva_sandbox/
├── tasks/              286 executable task bundles
├── vignettes/          authorization contracts and scenario specifications
├── seeds/              documented source-case summaries used by the benchmark
├── services/           deterministic mock services
├── evaluation/         harness adapters, judges, detectors, and analysis
└── task_generation/    seed-to-task and contextual-expansion pipelines

benchmark/
├── manifest.json       frozen release inventory
└── lineage.csv         source case to original and expanded task mapping

taxonomies/             environment pressure, direct-harm, and domain definitions

البدء السريع

1. التثبيت

المتطلبات هي Python 3.12 و Docker Desktop.

git clone https://github.com/PEACH-Research-Lab/AuthorizationBench.git
cd AuthorizationBench
bash scripts/bootstrap.sh

2. بناء بيئة العزل

docker build \
  -f authorization_eva_sandbox/Dockerfile.v2 \
  -t authorizationbench:sandbox \
  authorization_eva_sandbox

3. إعداد التقييم المدعوم بالنموذج

cp authorization_eva_sandbox/evaluation/config.toml.example \
   authorization_eva_sandbox/evaluation/config.toml

املأ فقط ملفات تعريف المزوّد التي تنوي استخدامها. يتم تجاهل التكوين المحلي بواسطة Git ويجب ألا يُرفع إلى المستودع أبدًا. راجع دليل البدء السريع للاطلاع على البيئات الخاصة بكل أداة تشغيل وأوامر التقييم.

4. جلب التشغيلات الصادرة

python -c "from huggingface_hub import snapshot_download; \
snapshot_download('peach-lab/AuthorizationBench', repo_type='dataset', \
local_dir='authorizationbench-data')"

القياس والنسب

يحتوي القياس على 44 حالة مهمة أصلية مستندة إلى 42 سجل مصدر مستخدمًا، تليها توسعة سياقية إلى 286 مهمة. يدعم سجلّا مصدر حالتين أصليتين متميزتين لكل منهما.

يربط benchmark/lineage.csv كل مهمة بسجل مصدرها، ويحدد الحالات الأصلية والموسّعة، ويسجل محور التوسعة حيثما توفر. ويجمّد benchmark/manifest.json جرد المهام الدقيق لهذا الإصدار.

خط أنابيب البناء

نقطة الدخول المدعومة من البذرة إلى المهمة هي:

./au312/bin/python -m authorization_eva_sandbox.task_generation.run_v3 \
  --seed-id S0001

يبدأ التوسيع السياقي من مهمة مُتحقَّق منها ويُغيّر بُعدًا واحدًا مع الحفاظ على المهمة المُسنَدة وحدود التخويل الخاصة بها. تتضمن خط الأنابيب العام مطالبات التوليد، والبوابات الحتمية، والإصلاح المحدود، وتحقيق الخدمة، وشيفرة التوسيع. تُستثنى عمدًا أدوات الترحيل التاريخية ونصوص التطوير لمرة واحدة.

راجع خط أنابيب البناء للاطلاع على مراحل البناء.

التصنيفات

تحتوي تصنيفات الضغط الظرفي على 14 ضغطًا مصنّفة حسب ما إذا كانت تنشأ من تعليمات المُوكِّل أو من البيئة. تتوفر معرّفاتها الثابتة وتعريفاتها وآلياتها وقنوات توصيلها في taxonomies/situational_pressures.md وفي الملف القابل للقراءة آليًا trigger_manifestation.json.

توحّد تصنيفات الضرر المباشر الفئات من Agent-SafetyBench وOpenAgentSafety مع الحفاظ على الإسناد على مستوى الفئة. راجع taxonomies/direct_harm.md و harm_taxonomy.json.

تسمّي تصنيفات النطاقات المعلومات أو الأصل أو السجل المحمي بحدود التخويل. راجع taxonomies/domains.md و domain_taxonomy.json.

تنزيل الأداة

الأكثر شعبية

عرض الكل →

اكتشف الأدوات الأكثر استخدامًا من قبل مجتمعنا.

  • 1

    OsintHunter

    letox4/osinthunter

    🎯 مجموعة أدوات OSINT المثالية: رسم بياني للتحقيق، وتقييم الثقة، وعائلات الأسماء المستعارة، وخريطة، وخط زمني، وتقارير. 49 وحدة، وأكثر من 400 موقع، دون الحاجة إلى مفاتيح API.

    708
  • 2

    ghostlock-app

    yukonga/ghostlock-app

    # تطبيق GhostLock للتنفيذ بنقرة واحدة (CVE-2026-43499)

    500
  • 3

    ARTEX

    baarai/artex

    منصة اختبار اختراق مستقلة متعددة الوكلاء تعتمد على LLM، مع وكلاء تخطيط وتنفيذ، ومخططات للأصول والاستكشاف، وتسجيل حركة مرور MITM، وإعادة اختبار الثغرات.

    398
  • 4

    redforge

    cybersecurity91/redforge

    مجموعة أدوات الفريق الأحمر في المتصفح مع 102 أداة دون اتصال للاستطلاع، وتوليد الحمولات، وهجمات بيانات الاعتماد، والتشفير، والترميز، وإعداد تقارير المهام.

    341
  • 5

    CyberStrikeAI

    ed1s0nz/cyberstrikeai

    نظام العمل للأمن السيبراني الأصلي بالذكاء الاصطناعي — حيث تتحول النية إلى تنفيذ محكوم، وتصبح الأدلة ذاكرة تشغيلية، وكل عملية تحسن التي تليها.

    259
  • 6

    antifox

    antifox-ai/antifox

    منصة اختبار اختراق متعددة الوكلاء ذاتية التشغيل بالذكاء الاصطناعي تُجري الاستطلاع واكتشاف سطح الهجوم والتحقق من الاستغلال وتسليم تقارير مدعومة بالأدلة.

    257

استكشف جميع الأدوات

تصفح مجموعتنا من الأدوات

عرض جميع الأدوات →