leakScraper

mongodb संस्करण

LeakScraper विशाल टेक्स्ट फ़ाइलों को संसाधित करने और विज़ुअलाइज़ करने के लिए उपकरणों का एक कुशल सेट है जिसमें क्रेडेंशियल्स होते हैं। ये उपकरण पेंटेस्टर्स/रेडटीमर्स को OSINT, क्रेडेंशियल्स गैदरिंग और क्रेडेंशियल्स स्टफिंग हमलों में मदद करने के लिए डिज़ाइन किए गए हैं।

इंस्टॉलेशन

• सबसे पहले : एक कार्यशील mongodb सर्वर होना चाहिए।
• फिर :
  root@kitploit:~

  git clone -b mongodb https://github.com/Acceis/leakScraper
  cd leakScraper
  sudo ./install.sh
  

  यह कुछ pip पैकेज और debian पैकेज (python-magic, python3-pymongo और bottle) इंस्टॉल करेगा।

आवश्यकताएँ

Linux (debian), python 3.x और एक mongodb सर्वर।

उपयोग

उसके लिए विकी देखें

स्क्रीनशॉट

विभिन्न उपकरण

LeakScraper तीन भागों में विभाजित है :

• leakStandardizer : एक उपकरण जो आपके द्वारा इंटरनेट पर किसी वैध स्रोत से प्राप्त लीक को मानकीकृत करता है। यह इनपुट के रूप में एक फ़ाइल लेता है जिसमें कुछ अजीब फ़ॉर्मेट में क्रेडेंशियल्स होते हैं, जिनमें गैर-ASCII अक्षर या खाली पंक्तियाँ, अमान्य ईमेल या कोई पासवर्ड नहीं होता है। यह आपकी मदद (रेगुलर एक्सप्रेशन का उपयोग करके) से, निम्नलिखित फ़ॉर्मेट का उपयोग करके एक आसानी से grep करने योग्य फ़ाइल तैयार करेगा: email:hash:plain ("plain" का अर्थ "प्लेन टेक्स्ट पासवर्ड")।
• leakImporter : एक उपकरण जो एक मानकीकृत लीक फ़ाइल को mongodb डेटाबेस में आयात करता है। यह फ़ाइल से डेटा निकालने, इसे एक mysql संगत फ़ॉर्मेट में डालने, इंडेक्स बनाने/प्रबंधित करने आदि का ध्यान रखेगा।
• leakScraper : डेटाबेस से डेटा खोदने और उसे अच्छी तरह से प्रदर्शित करने के लिए एक उपकरण और इंटरफ़ेस।

अभिधारणाएँ

• कवर किया गया उपयोग मामला निम्नलिखित है : किसी विशिष्ट संगठन/कंपनी/संरचना से संबंधित क्रेडेंशियल्स खोजना। यह उस संगठन से संबंधित ईमेल से जुड़े क्रेडेंशियल्स को खोजकर किया जाता है। उदाहरण : माइक्रोसॉफ्ट से संबंधित क्रेडेंशियल्स खोजना, उन खातों से जुड़े क्रेडेंशियल्स को खोजकर किया जाता है जो "@microsoft.com" पर समाप्त होने वाले ईमेल से पंजीकृत हैं। यह एकमात्र कवर किया गया उपयोग मामला है और इसका तकनीकी विकल्पों (डेटाबेस इंडेक्स और सामान्य रूप से डेटा प्रतिनिधित्व) के संदर्भ में बहुत मतलब है।

• लीक कई गीगाबाइट वजन के हो सकते हैं। इसका मतलब है कि प्रत्येक प्रक्रिया (मानकीकरण, आयात और खोज) मेमोरी के संदर्भ में इन-प्लेस एल्गोरिदम का उपयोग करती है। आप पहले से जान सकते हैं कि ये उपकरण किसी विशिष्ट फ़ाइल को संसाधित करने के लिए कितनी मेमोरी का उपयोग करेंगे, और यह कभी भी आपके कंप्यूटर के संसाधनों को समाप्त नहीं करेगा (जब तक कि आपके पास बहुत पुराना कंप्यूटर न हो)।

• बड़ी फ़ाइलों को संसाधित करने और बहुत सारे डेटा के साथ काम करने में समय लगता है। मेरे विचार में प्रक्रिया/आयात में कितना समय लगेगा, यह जानने के लिए दृश्य/रीयल-टाइम फीडबैक होना महत्वपूर्ण है। यह जानना महत्वपूर्ण है कि क्या आपने अभी 7 घंटे की प्रक्रिया शुरू की है या 1,200 वर्षों की लंबी प्रक्रिया।