Uscrapper Vanta

Wir präsentieren Uscrapper Vanta – entfesseln Sie die Kraft der Open-Source-Intelligence. Tauchen Sie tiefer in das riesige Web ein mit Uscrapper Vanta. Vanta eröffnet eine neue Stufe der Datenextraktionsfähigkeiten, ermöglicht die Erkundung unkartierter Gebiete des Dark Webs und deckt verborgene Schätze mit punktgenauer Genauigkeit mithilfe des Keyword-Extraktionsmodells auf. Uscrapper Vanta behält die Kernstärken seines Vorgängers bei: Es kann eine Fülle persönlicher Informationen sammeln, darunter E‑Mail-Adressen, Links zu sozialen Medien, Autorennamen, Geolokalisierungen, Telefonnummern und Benutzernamen, sowohl aus hyperverlinkten als auch aus nicht hyperverlinkten Quellen. Durch den Einsatz von Multithreading und ausgefeilten Anti-Webscraping-Abwehrmechanismen mit fortschrittlichen Modulen wird sichergestellt, dass Sie auf die benötigten Daten zugreifen können. Vanta unterstützt „Crawl and Scrape“ innerhalb derselben Domain und sammelt Informationen aus jeder relevanten Ecke einer Website. Es erstellt umfassende Berichte, um die extrahierten Daten zu organisieren und zu analysieren und rohe Informationen in verwertbare Erkenntnisse zu verwandeln.

🤩 Was gibt es Neues?:

Uscrapper Vanta:

• Dark-Web-Unterstützung: Uscrapper Vanta kann jetzt auch mit .onion- oder Dark-Web-Links umgehen. Diese erweiterte Funktionalität ermöglicht es Benutzern, wichtige Informationen aus bisher unzugänglichen Quellen zu extrahieren und bietet so einen umfassenderen Überblick über die digitale Landschaft.

• Keyword-basiertes Scraping: Mit der Einführung eines neuen Modells erlaubt Uscrapper Vanta nun das Scrapen von Webseiten nach bestimmten Schlüsselwörtern oder einer Liste von Schlüsselwörtern. Dieser maßgeschneiderte Ansatz erhöht die Vielseitigkeit des Tools und ermöglicht es Benutzern, sich auf die Extraktion nur der für ihre Bedürfnisse relevanten Informationen zu konzentrieren.

💡 Extrahierte Details:

Uscrapper extrahiert die folgenden Details von der bereitgestellten Website:

• E-Mail-Adressen: Zeigt auf der Website gefundene E-Mail-Adressen an.
• Social-Media-Links: Zeigt auf der Website gefundene Links zu verschiedenen Social-Media-Plattformen an.
• Autorennamen: Zeigt die mit der Website verbundenen Autorennamen an.
• Geolokalisierungen: Zeigt mit der Website verbundene Geolokalisierungsinformationen an.
• Nicht hyperverlinkte Details: Zeigt auf der Website gefundene, nicht hyperverlinkte Details an, einschließlich E-Mail-Adressen, Telefonnummern und Benutzernamen.
• Keyword-basierte Extraktion: Zeigt relevante Daten durch Angabe von Begriffen oder Zusammenstellung umfassender Keyword-Listen an.

📽 Vorschau:

🛠️ Installationsschritte:

git clone https://github.com/z0m31en7/Uscrapper.git

cd Uscrapper/install/ 
chmod +x ./install.sh && ./install.sh      #Für Unix/Linux-Systeme

🔮 Verwendung:

Verwenden Sie die folgende Befehlszeilensyntax, um Uscrapper-vanta auszuführen:

python Uscrapper-vanta.py [-h] [-u URL] [-O] [-ns] [-c CRAWL] [-t THREADS] [-k KEYWORDS [KEYWORDS ...]] [-f FILE]

Argumente:

• -u URL, --url URL (URL der Website)
• -O, --generate-report (Einen Bericht erstellen)
• -ns, --nonstrict (Nicht strikte Benutzernamen anzeigen (kann ungenaue Ergebnisse liefern))
• -c CRAWL, --crawl (CRAWL) Maximale Anzahl von Links zum Crawlen und Scrapen innerhalb desselben Bereichs angeben
• -t THREADS, --threads THREADS (Anzahl der Threads, die beim Crawlen verwendet werden sollen (Standard=4))
• -k KEYWORDS [KEYWORDS ...], --keywords KEYWORDS [KEYWORDS ...] (Zu suchende Schlüsselwörter (als durch Leerzeichen getrennte Argumente)
• -f FILE, --file FILE (Pfad zu einer Textdatei mit Schlüsselwörtern)

📜 Hinweis:

• Uscrapper verwendet Web-Scraping-Techniken, um Informationen von Websites zu extrahieren. Stellen Sie sicher, dass Sie es verantwortungsbewusst und unter Einhaltung der Nutzungsbedingungen der Website sowie der geltenden Gesetze verwenden.

• Die Genauigkeit und Vollständigkeit der extrahierten Details hängen von der Struktur und dem Inhalt der analysierten Website ab.

• Um einige Anti-Webscraping-Methoden zu umgehen, haben wir Selenium verwendet, was den gesamten Prozess verlangsamen kann.

💌 Beitrag:

Möchten Sie eine neue Funktion hinzugefügt haben?

• Erstellen Sie einen Pull-Request mit allen erforderlichen Details; nach einer Überprüfung wird er zusammengeführt.
• Sie können dazu beitragen, indem Sie die regulären Ausdrücke effizienter und genauer machen oder weitere Funktionen vorschlagen, die hinzugefügt werden könnten.

🛡️ Lizenz:

Dieses Projekt ist unter der MIT-Lizenz lizenziert.