网络爬虫

koala73/worldmonitor

实时全球情报仪表盘。AI驱动的新闻聚合、地缘政治监控和基础设施跟踪，集成在统一的情境感知界面中。

naibowang/easyspider

A visual no-code/code-free web crawler/spider易采集：一个可视化浏览器自动化测试/数据采集/网页爬虫软件，可以无代码图形化的设计和执行爬虫任务。别名：ServiceWrapper面向Web应用的智能化服务封装系统。

dgtlmoon/changedetection.io

网站变更检测、网页监控和网站变更提醒的最佳且最简单的工具。非常适合跟踪内容变化、价格下降、补货提醒和网站篡改监控——全部免费，或享受我们的 SaaS 套餐！

qeeqbox/social-analyzer

用于在1000个社交媒体\网站中分析和查找个人资料的API、CLI和Web应用

scrapegraphai/scrapegraph-ai

基于 AI 的 Python 爬虫

skyvern-ai/skyvern

使用AI自动化基于浏览器的工作流程

projectdiscovery/nuclei-templates

社区策划的用于 nuclei 引擎寻找安全漏洞的模板列表。

d4vinci/scrapling

🕷️ 一个自适应网页抓取框架，处理从单个请求到大规模爬取的所有任务！

s0md3v/photon

为OSINT设计的极速爬虫。

projectdiscovery/katana

下一代爬取与爬虫框架。

instaloader/instaloader

从 Instagram 下载图片（或视频）及其标题和其他元数据。

soxoj/maigret

🕵️‍♂️ 通过用户名从 3000 多个站点收集某人的档案资料

daijro/camoufox

🦊 反检测浏览器

bigbodycobain/shadowbroker

实时地理空间开源情报平台，聚合60多个公共遥测数据源（ADS-B、AIS、卫星、CCTV）到统一地图，配备服务器端侦察工具包、AI智能体通道和去中心化网状通信。

s0md3v/xsstrike

Most advanced XSS scanner.

blacklanternsecurity/bbot

面向黑客的递归互联网扫描器。🧡

mishakorzik/allhackingtools

一体化黑客工具集合！更多黑客工具！适用于 Termux。