소개

theHarvester는 사용하기 쉽지만 강력한 도구로, 레드 팀 평가 또는 침투 테스트의 정찰 단계에서 사용하도록 설계되었습니다. 오픈 소스 인텔리전스(OSINT) 수집을 수행하여 도메인의 외부 위협 환경을 파악하는 데 도움을 줍니다. 이 도구는 여러 공개 리소스를 사용하여 이름, 이메일, IP, 서브도메인 및 URL을 수집합니다. 포함된 리소스는 다음과 같습니다.

패키지 버전

설치 및 의존성

Python 3.12 이상.
https://github.com/laramies/theHarvester/wiki/Installation

uv 설치:

curl -LsSf https://astral.sh/uv/install.sh | sh

저장소 복제:

git clone https://github.com/laramies/theHarvester
cd theHarvester

의존성 설치 및 가상 환경 생성:

uv sync

theHarvester 실행:

uv run theHarvester

개발

개발 의존성 설치:

uv sync --all-groups

테스트 실행:

uv run pytest

린팅 및 포매팅 실행:

uv run ruff check

uv run ruff format

선택적 /additional/* REST API 경로를 보호하려면 THEHARVESTER_API_KEY를 설정하고 동일한 값을 X-API-Key 헤더에 전달하세요. 키가 구성되지 않은 경우 해당 경로는 503을 반환합니다.

수동 모듈

baidu: 바이두 검색 엔진 (https://www.baidu.com)
bevigil: CloudSEK BeVigil이 모바일 애플리케이션을 스캔하여 OSINT 자산을 찾습니다 (https://bevigil.com/osint-api)
brave: Brave 검색 엔진 - 이제 공식 Brave Search API 사용 (https://api-dashboard.search.brave.com)
bufferoverun: IPv4 공간에서 TLS 인증서에 대한 빠른 도메인 이름 조회 (https://tls.bufferover.run)
builtwith: 웹사이트가 무엇으로 구축되었는지 확인 (https://builtwith.com)
censys: 인증서 검색을 사용하여 서브도메인을 열거하고 이메일 수집 (https://censys.io)
certspotter: Cert Spotter가 인증서 투명성 로그를 모니터링 (https://sslmate.com/certspotter)
criminalip: 특화된 사이버 위협 인텔리전스(CTI) 검색 엔진 (https://www.criminalip.io)
crtsh: Comodo 인증서 검색 (https://crt.sh)
dehashed: 데이터 보안을 한 단계 더 높이세요 (https://dehashed.com)
dnsdumpster: 도메인과 관련된 호스트를 발견할 수 있는 도메인 연구 도구 (https://dnsdumpster.com)
duckduckgo: DuckDuckGo 검색 엔진 (https://duckduckgo.com)
dymo: Dymo API 데이터 검증기 - 도메인 확인, 오타 제안 및 MX/사기 신호 표면화 (https://dymo.tpeoficial.com)
fofa: FOFA 검색 엔진 (https://en.fofa.info)
fullhunt: 차세대 공격 표면 보안 플랫폼 (https://fullhunt.io)
github-code: GitHub 코드 검색 엔진 (https://www.github.com)
hackertarget: 온라인 취약점 스캐너 및 네트워크 인텔리전스로 조직 지원 (https://hackertarget.com)

능동 모듈

DNS 무차별 대입: 사전 기반 무차별 대입 열거
스크린샷: 발견된 서브도메인의 스크린샷 촬영

API 키가 필요한 모듈

API 키 설정에 대한 문서는 다음에서 확인할 수 있습니다: https://github.com/laramies/theHarvester/wiki/Installation#api-keys

bevigil - 월 50회 무료 쿼리. 월 1,000회 쿼리 $50
brave - 무료 플랜 이용 가능. 상위 한도를 위한 프로 플랜
bufferoverun - 월 100회 무료 쿼리. 월 10,000회 $25
builtwith - 평생 50회 무료 쿼리. 연간 $2,950
censys - 500 크레딧 $100
criminalip - 월 100회 무료 쿼리. 월 700,000회 $59
dehashed - 500 크레딧 $15, 5,000 크레딧 $150
dnsdumpster - 일 50회 무료 쿼리, $49
dymo - 무료 티어 이용 가능, 상위 한도를 위한 유료 플랜
fofa - 월 10,000회 쿼리 크레딧. 월 100,000개 결과 $25
fullhunt - 50회 무료 쿼리. 200회 쿼리 $29/월, 500회 쿼리 $59
github-code
haveibeenpwned - 분당 10회 이메일 검색 $4.50, 분당 50회 이메일 검색 $22
hunter - 월 50회 무료 크레딧. 연간 12,000 크레딧 $34
hunterhow - 30일간 10,000회 무료 API 결과. 30일간 50,000회 API 결과 $10
intelx - 무료 계정은 매우 제한적. 비즈니스 계정 $2,900
leakix - 무료 25개 결과 페이지, 월 3,000회 API 요청. 현상금 사냥꾼 $29
leaklookup - 20 크레딧 $10, 50 크레딧 $20, 140 크레딧 $50, 300 크레딧 $100
mojeek - 5,000 무료 크레딧 $6.50, CPM $1.30(개인), CPM $2.60(스타트업), CPM $3.90(비즈니스)
netlas - 일 50회 무료 요청. 1,000회 요청 $49, 10,000회 요청 $249
onyphe - 월 1,000만 결과 $587
pentesttools - 5개 자산 netsec $95/월, 5개 자산 webnetsec $140/월
projecdiscovery - 업무용 이메일 필요. 가입 시 도메인에 대해 월별 무료 발견 및 취약점 스캔, 엔터프라이즈 $
rocketreach - 월 100회 이메일 조회 $48, 월 250회 이메일 조회 $108
securityscorecard - 업무용 이메일 필요
securityTrails - 월 50회 무료 쿼리. 월 20,000회 쿼리 $500
sherlockeye - 중급 $46/월, 고급 $120/월. 엔터프라이즈 이용 가능.
shodan - 프리랜서 $69/월, 소규모 비즈니스 $359/월
tomba - 월 25회 무료 검색. 월 1,000회 검색 $39, 월 5,000회 검색 $89
venacus - 일 1회 무료 검색. 일 10회 검색 $12, 일 30회 검색 $36
virustotal - 일 500회 무료 조회, 월 15,500회 조회. 비즈니스 계정은 업무용 이메일 필요
whoisxml - 2,000회 쿼리 $50, 5,000회 쿼리 $105
windvane - 100회 무료 쿼리
zoomeye - 일 5회 무료 결과. 일 30회 결과 $190/년

코멘트, 버그 및 요청사항

Christian Martorella @laramies [email protected]
Matthew Brown @NotoriousRebel1
Jay "L1ghtn1ng" Townsend @jay_townsend1

주요 기여자

Matthew Brown @NotoriousRebel1
Jay "L1ghtn1ng" Townsend @jay_townsend1
Lee Baird @discoverscripts

감사

John Matherly - Shodan 프로젝트
Ahmed Aboul Ela - 서브도메인 이름 사전 (크고 작은)

인기

theHarvester

소개