#1Инструменты веб-краулинга, скрапинга, спайдеринга и автоматизированной разведки для тестирования безопасности.
Рекомендация Kitploit

CLI для скачивания реальных JS/CSS/ресурсов веб-сайтов (не сплющенного HTML)
Лучший и простейший инструмент для обнаружения изменений на веб-сайтах, мониторинга веб-страниц и оповещений об изменениях на сайтах. Идеально…

Fucking Search Engines Scraper - библиотека Python для сбора URL-адресов из поисковых систем.

Настраиваемый HTTP MITM-прокси на Rust с подменой отпечатков TLS, HTTP/2 и TCP.

Библиотека Python для использования большого пула IP-адресов AWS API Gateway в качестве прокси для создания псевдобесконечных IP-адресов для…

CLI-сканер на Go для отравления и обмана веб-кеша. Поддерживает 10 техник отравления, несколько методов обмана, встроенный краулер, отчеты в JSON и…

Обходит сайты .onion через Tor для сбора заголовков страниц, имён хостов и связей между ссылками, экспортируя JSON-деревья и визуализации для…

Преемник Undetected-Chromedriver. Предоставляет молниеносно быстрый фреймворк для веб-автоматизации, веб-скрапинга, ботов и любых других творческих…

Многоплатформенная библиотека на C++ для высокопроизводительного захвата, разбора, создания и анализа сетевых пакетов. Поддерживает libpcap, DPDK,…

Единая панель интеграции разведданных со всех источников — потоки данных WiFi, сотовой связи, CCTV, ADS-B, орбитальные и SDR-каналы объединены на…

Библиотека для веб-скрейпинга и автоматизации браузера на Node.js для создания надёжных краулеров с поддержкой HTTP и headless-браузеров, ротацией…

Терминальный интерфейс для исследования поверхности атаки: DNS-разведка, перечисление поддоменов, сканирование портов, обратный IP, URL-адреса…

Nikto — сканер веб-серверов

Без API. Краулинг постов (фото, лайки, комментарии, дата ...) по имени пользователя, хэштегам

Собирает, проверяет и ранжирует публичные HTTP/SOCKS-прокси по вашим собственным целям, а затем предоставляет их через ранжированные экспорты, пулы,…

Извлекает динамически загружаемые файлы JavaScript путём статического анализа HTML и JS веб-сайта, обнаруживая чанки webpack, ленивую загрузку через…

A visual no-code/code-free web crawler/spider易采集:一个可视化浏览器自动化测试/数据采集/网页爬虫软件,可以无代码图形化的设计和执行爬虫任务。别名:ServiceWrapper面向Web应用的智能化服务封装系统。

Real-time geospatial OSINT platform aggregating 60+ public telemetry feeds (ADS-B, AIS, satellites, CCTV) into a unified map with server-side recon…