Краулер

panniantong/agent-reach

Give your AI agent eyes to see the entire internet. Read & search Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu — one CLI, zero API fees.

d4vinci/scrapling

Адаптивный фреймворк для веб-скрейпинга с обходом антибот-защиты, автоматическим перемещением элементов, параллельным сканированием, ротацией прокси…

sqlmapproject/sqlmap

Инструмент для автоматического внедрения SQL-инъекций и захвата базы данных

microsoft/playwright

Browser automation framework with a single API for Chromium, Firefox, and WebKit. Supports web testing, scraping, screenshots, and network…

naibowang/easyspider

A visual no-code/code-free web crawler/spider易采集：一个可视化浏览器自动化测试/数据采集/网页爬虫软件，可以无代码图形化的设计和执行爬虫任务。别名：ServiceWrapper面向Web应用的智能化服务封装系统。

projectdiscovery/nuclei

Быстрый сканер уязвимостей на основе YAML с шаблонным движком обнаружения для автоматизированного тестирования безопасности веб-приложений, API,…

soxoj/maigret

🕵️‍♂️ Collect a dossier on a person by username from 6K websites

dgtlmoon/changedetection.io

Лучший и самый простой инструмент для отслеживания изменений на сайтах, мониторинга веб-страниц и оповещений об изменениях на сайте. Идеально…

scrapegraphai/scrapegraph-ai

Python-скрапер на основе ИИ

qeeqbox/social-analyzer

API, CLI и веб-приложение для анализа и поиска профиля человека в 1000 социальных сетей \ веб-сайтов

zaproxy/zaproxy

Сканер безопасности веб-приложений с открытым исходным кодом для автоматического обнаружения уязвимостей, ручного тестирования на проникновение и…

skyvern-ai/skyvern

Автоматизируйте браузерные рабочие процессы с помощью ИИ

apify/crawlee

Библиотека для веб-скрейпинга и автоматизации браузера на Node.js для создания надёжных краулеров с поддержкой HTTP и headless-браузеров, ротацией…

projectdiscovery/nuclei-templates

Список шаблонов для движка nuclei, подобранных сообществом для поиска уязвимостей безопасности.

ffuf/ffuf

Быстрый веб-фаззер, написанный на Go

maurosoria/dirsearch

Сканер веб-путей