Uscrapper Vanta

Представляем Uscrapper Vanta, раскрывающий возможности OSINT. Погрузитесь глубже в обширную паутину с Uscrapper Vanta. Vanta открывает новый уровень возможностей извлечения данных, позволяя исследовать неизведанные территории даркнета и находить скрытые жемчужины с предельной точностью с помощью модели извлечения ключевых слов. Uscrapper Vanta сохраняет основные преимущества своего предшественника. С его помощью можно собрать множество личной информации, включая адреса электронной почты, ссылки на социальные сети, имена авторов, геолокации, номера телефонов и имена пользователей, как из гиперссылочных, так и из негиперссылочных источников. Используя многопоточность и сложные модули защиты от веб-скрапинга, обеспечивая доступ к необходимым данным, Vanta поддерживает «обход и сбор» в пределах одного домена, собирая информацию из каждого соответствующего уголка веб-сайта, генерирует комплексные отчёты для организации и анализа извлечённых данных, превращая необработанную информацию в полезные инсайты.

🤩 Что нового?:

Uscrapper Vanta:

• Поддержка даркнета: Uscrapper Vanta теперь может обрабатывать .onion-ссылки или ссылки даркнета. Эта расширенная функциональность позволяет пользователям извлекать важную информацию из ранее недоступных источников, обеспечивая более полное представление о цифровом ландшафте.

• Сбор по ключевым словам: Благодаря внедрению новой модели Uscrapper Vanta теперь позволяет пользователям сканировать веб-страницы на наличие определённых ключевых слов или их списка. Такой подход повышает универсальность инструмента, позволяя сосредоточиться на извлечении только той информации, которая соответствует потребностям пользователя.

💡 Извлекаемые данные:

Uscrapper извлекает с указанного веб-сайта следующие данные:

• Адреса электронной почты: отображает найденные на сайте адреса электронной почты.
• Ссылки на социальные сети: отображает найденные на сайте ссылки на различные платформы социальных сетей.
• Имена авторов: отображает имена авторов, связанных с сайтом.
• Геолокации: отображает информацию о географическом положении, связанную с сайтом.
• Негиперссылочные данные: отображает найденные на сайте негиперссылочные данные, включая адреса электронной почты, номера телефонов и имена пользователей.
• Извлечение по ключевым словам: отображает соответствующие данные путём указания терминов или составления списков ключевых слов.

📽 Превью:

🛠️ Шаги установки:

git clone https://github.com/z0m31en7/Uscrapper.git

cd Uscrapper/install/ 
chmod +x ./install.sh && ./install.sh      #Для Unix/Linux систем

🔮 Использование:

Для запуска Uscrapper-vanta используйте следующий синтаксис командной строки:

python Uscrapper-vanta.py [-h] [-u URL] [-O] [-ns] [-c CRAWL] [-t THREADS] [-k KEYWORDS [KEYWORDS ...]] [-f FILE]

Аргументы:

• -u URL, --url URL (URL веб-сайта)
• -O, --generate-report (Создать отчёт)
• -ns, --nonstrict (Отображать нестрогие имена пользователей (может показывать неточные результаты))
• -c CRAWL, --crawl (CRAWL) Укажите максимальное количество ссылок для обхода и сбора в пределах одной области
• -t THREADS, --threads THREADS (Количество потоков для использования во время обхода (по умолчанию=4))
• -k KEYWORDS [KEYWORDS ...], --keywords KEYWORDS [KEYWORDS ...] (Ключевые слова для поиска (аргументы, разделённые пробелами))
• -f FILE, --file FILE (Путь к текстовому файлу, содержащему ключевые слова)

📜 Примечание:

• Uscrapper использует методы веб-скрапинга для извлечения информации с веб-сайтов. Убедитесь, что вы используете его ответственно и в соответствии с условиями использования веб-сайта и действующим законодательством.

• Точность и полнота извлечённых данных зависят от структуры и содержимого анализируемого веб-сайта.

• Для обхода некоторых методов защиты от веб-скрапинга мы используем selenium, что может замедлить общий процесс.

💌 Вклад:

• Создайте pull request со всеми необходимыми деталями, и он будет объединён после проверки.
• Вы можете внести свой вклад, сделав регулярные выражения более эффективными и точными, или предложив дополнительные функции, которые можно добавить.

🛡️ Лицензия: