
smbcrawler هي أداة عملية ومباشرة تأخذ بيانات الاعتماد وقائمة بالمضيفين وتقوم بـ 'الزحف' (أو 'العنكبوت') عبر تلك المشاركات
SmbCrawler أداة عملية لا تعقيد فيها تأخذ بيانات الاعتماد وقائمة من المضيفين و"تزحف" (أو "تنسج") عبر تلك المشاركات. الميزات:
إذا كنت بحاجة إلى تعليمات حول كيفية تثبيت حزمة Python، فإنني
أوصيك بالتأكد من تثبيت pipx
لديك وتشغيل
pipx install smbcrawler.
يُوصى بشدة بإضافة إكمال الصدفة (shell completion). بصفتها تطبيق Python يستخدم
مكتبة click، يمكنك إضافة الإكمال التلقائي بالجدولة (tab completion) إلى bash وzsh وfish باستخدام
الآلية
المعتادة.
شغّلها هكذا (10 خيوط، أقصى عمق 5):
$ smbcrawler crawl -i hosts.txt -u pen.tester -p iluvb0b -d contoso.local -t 10 -D 5
خضع SmbCrawler لعملية إصلاح شاملة. التغييرات الأكثر أهمية هي:
كانت وسائط سطر الأوامر القديمة المتعلقة بـ"الملفات المثيرة للاهتمام" و"المشاركات المملة" وما شابه ذلك ركيكة ومربكة. بدلًا من ذلك نستخدم الآن "profiles"؛ انظر أدناه للتفاصيل.
أيضًا، أدركت أنني أعدت اختراع قواعد البيانات العلائقية أساسًا، لكنني فعلت ذلك بشكل سيئ جدًا، فلمَ لا أستخدم sqlite مباشرةً؟ يتيح لنا نهج sqlite إنتاج تقرير HTML تفاعلي جميل بأداء جيد. لا يزال بإمكانك تصدير النتائج بصيغ متنوعة إذا كنت بحاجة لاستخدام البيانات في خط أنابيب أداة ما.
لم تكن الطريقة القديمة التي كان SmbCrawler يبلّغ بها عن الأذونات مفيدة جدًا في بعض الأحيان. على سبيل المثال، ليس من غير المألوف أن تمتلك أذونات قراءة في الدليل الجذر للمشاركة، لكن جميع الأدلة الفرعية محمية، مثل ملفات تعريف المستخدمين. سيبلّغ SmbCrawler الآن عن مدى العمق الذي تمكّن من قراءة شجرة دليل المشاركة إليه وما إذا كان قد بلغ الحد الأقصى أو كان يمكنه الذهاب أعمق لو كنت قد قدّمت قيمة أعلى لوسيط الحد الأقصى للعمق.
إذا كنت تفضّل الإصدار القديم، فهو لا يزال متاحًا على PyPI و
قابلًا للتثبيت باستخدام pipx install smbcrawler==0.2.0، على سبيل المثال.
أثناء التشغيل، يمكنك استخدام المفاتيح التالية:
p: إيقاف الزاحف مؤقتًا وتخطي المضيفين أو المشاركات الفردية<space>: طباعة التقدم الحاليs: طباعة تحديث حالة أكثر تفصيلًالمزيد من المعلومات، شغّل smbcrawler -h.
حتى في الشبكات متوسطة الحجم، سيعثر SmbCrawler على كميات هائلة من البيانات. يتمثل التحدي في تقليل الإيجابيات الكاذبة.
من المهم إدراك أن الأذونات يمكن أن تنطبق على مستوى الخدمة وعلى مستوى نظام الملفات. قد تسمح لك خدمة SMB البعيدة بالمصادقة وقد يمتلك حساب المستخدم لديك أذونات قراءة من حيث المبدأ، لكنه قد يفتقر إلى هذه الأذونات على نظام الملفات.
سيبلّغ SmbCrawler إذا كانت لديك أذونات لـ:
--depth)نظرًا لأن التحقق من أذونات مشاركات SMB ليس بالأمر الهيّن دون
محاولة الإجراء المعني، سيحاول SmbCrawler إنشاء
دليل على كل مشاركة. اسمه
smbcrawler_DELETEME_<8 random characters> وسيُحذف
فورًا، لكن كن على دراية بذلك على أي حال.
[!WARNING] أحيانًا تكون لديك صلاحية إنشاء المجلدات، لكن ليس حذفها، لذا ستترك مجلدًا فارغًا هناك.
لتحديد ما يجب فعله مع مشاركات أو ملفات أو مجلدات معينة، يمتلك SmbCrawler ميزة تُسمى "الملفات التعريفية" (profiles). ألقِ نظرة على الملف التعريفي الافتراضي.
يتم تحميل الملفات التعريفية من ملفات بامتدادات *.yml أو *.yaml من
هذه المواقع:
$XDG_DATA_HOME/smbcrawler/ (~/.local/share/smbcrawler افتراضيًا)--extra-profile-directory--extra-profile-fileتتجاوز الملفات التعريفية من كل موقع التعريفات السابقة.
تحدد قيمة regex ما إذا كان الملف التعريفي يطابق، وسيُستخدم آخر
ملف تعريفي مطابق. جميع التعبيرات النمطية
غير حساسة لحالة الأحرف، بما يعكس السلوك الأكثر شيوعًا في عالم
Windows.
نظرًا لأنه قد يكون من المربك كيفية عمل الملفات التعريفية من مصادر مختلفة
معًا، احرص على استخدام المعامل --dry-run. فهو يعرض لك
التكوين الفعّال ولا يفعل أي شيء آخر.
لنلقِ نظرة على كل قسم، وهو دائمًا قائمة من القواميس. كل مفتاح من مفاتيح القاموس هو تسمية عشوائية وكل من القيم هو بدوره قاموس بخصائص مختلفة.
comment: نص مفيد يصف هذا الملف التعريفيregex: تعبير نمطي يحدد الملفات التي ينطبق عليها هذا الملف
التعريفي. التعبير النمطي الأخير الذي يطابق هو الذي يُحتسب.regex_flags: مصفوفة من الأعلام التي ستُمرَّر إلى دالة
match للتعبير النمطيhigh_value (الافتراضي: false): إذا كان الملف "عالي القيمة"، فسيُبلَّغ عن
وجوده، لكنه لن يُنزَّل بالضرورة
(فكّر في الأقراص الصلبة الافتراضية - مهمة، لكنها كبيرة جدًا بحيث لا يمكن تنزيلها
تلقائيًا)download (الافتراضي: true): إذا كانت true، فسيُ نزَّل أول 200KiBi
(أو الملف بأكمله إذا كان high_value=true) ويُحلَّل بحثًا عن
الأسرارcomment، regex، regex_flags: نفس ما سبقhigh_value: سيُبلَّغ عن وجوده وسيُغيَّر عمق الزحف إلى
ما لا نهايةcrawl_depth: ازحف في هذه المشاركة أو المجلد حتى عمق مختلف
عما يحدده المعامل --depthcomment، regex_flags: نفس ما سبقregex: تعبير نمطي يطابق السر. يمكن أن يكون السر نفسه
مجموعة مسماة بالاسم secret.من المنطقي تشغيل SmbCrawler أولاً بعمق زحف 1 للحصول على
فكرة عما تتعامل معه. في هذا التشغيل الأول، يمكنك تمكين
فحص الكتابة باستخدام -w:
$ smbcrawler -C permissions_check.crwl crawl -D1 -t10 -w \
-i <INPUT FILE> -u <USER> -d <DOMAIN> -p <PASSWORD>
لاحظ أن هذا يفحص صلاحيات الكتابة والقراءة في المجلد الجذر لكل مشاركة فقط. لن يخبرك سوى تشغيل كامل بالمزيد حول مدى عمق صلاحيات القراءة.
بعد فحص الصلاحيات الأولي، يمكنك تحديد المشاركات المثيرة للاهتمام والمملة
لتشغيلك التالي أو لعدة تشغيلات. تظهر بعض المشاركات مثل
SYSVOL وNETLOGON مرات عديدة، لذا يجب عليك ضبط عمق الزحف
إلى صفر في تشغيلك التالي واختيار مضيف واحد لفحص هذه المشاركات المكررة
في تشغيل ثالث. إليك مثال:
$ smbcrawler -C dc_only.crwl crawl -D -1 <DC IP> \
-u <USER> -d <DOMAIN> -p <PASSWORD>
$ smbcrawler -C full.crwl crawl -D5 -t10 -i <NEW INPUT FILE> \
-u <USER> -d <DOMAIN> -p <PASSWORD> \
--extra-profile-file skip_sysvol.yml
هنا، سيكون skip_sysvol.yml كالتالي:
shares:
sysvol:
comment: "Skip sysvol and netlogon share"
regex: 'SYSVOL|NETLOGON'
crawl_depth: 0
لا تتردد في تضمين مشاركات أخرى هنا قد تعتقد أنها لا تستحق الزحف.
توجد البيانات الخام في قاعدة بيانات SQLite ودليل
(output.crwl وoutput.crwl.d افتراضيًا). يحتوي الدليل
على دليلين إضافيين: أحدهما يحتوي على الملفات التي تم تنزيلها مع جعلها فريدة بواسطة
تجزئة المحتوى، ودليل يعكس جميع المشاركات مع روابط رمزية تشير
إلى ملفات المحتوى. هذا الأخير مفيد للبحث النصي (grep) عبر جميع
الملفات التي تم تنزيلها.
يمكن تحويل البيانات إلى تنسيقات متعددة. يمكنك أيضًا ببساطة
الوصول إلى قاعدة البيانات باستخدام sqlitebrowser، على سبيل المثال. تم تعريف بعض العروض المفيدة
مسبقًا. أو يمكنك إخراج JSON واستخدام jq لمعالجة
البيانات.
إذا كنت تريد عرض جميع المشاركات التي تمكنت من قراءتها بما يتجاوز الدليل الجذر في جدول LaTeX، على سبيل المثال، فاستخدم هذا الاستعلام: