Crawler

panniantong/agent-reach

AI 에이전트에게 인터넷 전체를 볼 수 있는 눈을 선사하세요. Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu를 읽고 검색하세요 — 하나의 CLI, API 비용 제로.

d4vinci/scrapling

적응형 웹 스크래핑 프레임워크로, 안티봇 우회, 자동 요소 재배치, 동시 크롤링, 프록시 로테이션, 브라우저 자동화를 통해 견고한 데이터 추출을 지원합니다.

sqlmapproject/sqlmap

자동 SQL 인젝션 및 데이터베이스 탈취 도구

microsoft/playwright

Browser automation framework with a single API for Chromium, Firefox, and WebKit. Supports web testing, scraping, screenshots, and network…

naibowang/easyspider

A visual no-code/code-free web crawler/spider易采集：一个可视化浏览器自动化测试/数据采集/网页爬虫软件，可以无代码图形化的设计和执行爬虫任务。别名：ServiceWrapper面向Web应用的智能化服务封装系统。

projectdiscovery/nuclei

빠른 YAML 기반 취약점 스캐너로, 템플릿 기반 탐지 엔진을 통해 웹 애플리케이션, API, 네트워크, DNS, 클라우드 인프라 전반에 걸친 자동화된 보안 테스트를 수행합니다.

soxoj/maigret

🕵️‍♂️ Collect a dossier on a person by username from 6K websites

dgtlmoon/changedetection.io

웹사이트 변경 감지, 웹페이지 모니터링, 웹사이트 변경 알림을 위한 최고의 가장 간단한 도구입니다. 콘텐츠 변경 추적, 가격 인하, 재입고 알림, 웹사이트 변조 모니터링에 완벽합니다—무료로 이용하거나 SaaS 플랜을 즐겨보세요!

scrapegraphai/scrapegraph-ai

AI 기반 Python 스크레이퍼

qeeqbox/social-analyzer

1000개의 소셜 미디어 \ 웹사이트에서 개인의 프로필을 분석하고 찾기 위한 API, CLI 및 웹 앱

zaproxy/zaproxy

자동 취약점 탐지, 수동 침투 테스트, 그리고 프록시 기반 가로채기 엔진을 이용한 API 보안 테스트를 위한 오픈소스 웹 애플리케이션 보안 스캐너입니다.

skyvern-ai/skyvern

AI를 사용하여 브라우저 기반 워크플로우를 자동화하세요

apify/crawlee

HTTP 및 헤드리스 브라우저 지원, 프록시 로테이션, 사람과 유사한 핑거프린팅을 갖춘 안정적인 크롤러를 구축하기 위한 Node.js 웹 스크래핑 및 브라우저 자동화 라이브러리입니다.

projectdiscovery/nuclei-templates

커뮤니티가 엄선한 nuclei 엔진용 템플릿 목록으로, 보안 취약점 탐색에 사용됩니다.

ffuf/ffuf

Go로 작성된 고속 웹 퍼저

maurosoria/dirsearch

웹 경로 스캐너