网络爬虫

tomnomnom/waybackurls

获取 Wayback Machine 已知的某个域名的所有 URL

circl/ail-framework

AIL框架 - 分析信息泄露框架。项目已迁移至 https://github.com/ail-project

ginlix-ai/langalpha

自动化OSINT框架，用于侦察、数据收集和威胁情报聚合，配备模块化爬虫、扫描器和提取管道。

wapiti-scanner/wapiti

使用 Python3 编写的 Web 漏洞扫描器

thewhiteh4t/finalrecon

自动化的Web侦察工具，在一个模块化框架中提供标头分析、DNS枚举、子域名发现、目录扫描、SSL检查和端口扫描。

al0ne/vxscan

python3写的综合扫描工具，主要用来存活验证，敏感文件探测(目录扫描/js泄露接口/html注释泄露)，WAF/CDN识别，端口扫描，指纹/服务识别，操作系统识别，POC扫描，SQL注入，绕过CDN，查询旁站等功能，主要用来甲方自测或乙方授权测试，请勿用来搞破坏。

rndinfosecguy/scavenger

爬虫（Bot），用于在粘贴网站上搜索凭证泄露。

eldraco/domain_analyzer

分析任意域名的安全性，尽可能收集所有信息。使用Python编写。

qianlitp/crawlergo

用于网络漏洞扫描器的强大浏览器爬虫

1tayh/noisy

简单的随机DNS、HTTP/S互联网流量噪声生成器

uphiago/recon-skills

实地验证的进攻性安全技能包，包含 169 种侦察与渗透测试技术。涵盖 CORS、SSRF、子域名接管、云 IAM 滥用、SCADA 枚举以及跨 45 多个行业的自动化 CMS 检测。

megadose/onionsearch

OnionSearch 是一个脚本，用于从不同的.onion搜索引擎中抓取URL。

paulpierre/informer

一个用Python编写的Telegram大规模监控机器人

mandatoryprogrammer/thermoptic

一款下一代 HTTP 隐身代理，能够在协议栈的所有层面上完美地将请求伪装成 Chrome 浏览器。

xnl-h4ck3r/waymore

从 Wayback Machine、Common Crawl、Alien Vault OTX、URLScan、VirusTotal、GhostArchive 和 Intelligence X 中发现更多内容！

jaeles-project/gospider

Gospider - 用Go编写的快速网络爬虫