概要

theHarvesterは、レッドチーム評価やペネトレーションテストの偵察段階で使用するために設計された、シンプルで強力なツールです。オープンソースインテリジェンス（OSINT）を収集し、ドメインの外部脅威状況を把握するのに役立ちます。このツールは、以下の複数の公開リソースを使用して、名前、メールアドレス、IP、サブドメイン、URLを収集します。

パッケージバージョン

インストールと依存関係

Python 3.12以上
https://github.com/laramies/theHarvester/wiki/Installation

uvをインストール:

curl -LsSf https://astral.sh/uv/install.sh | sh

リポジトリをクローン:

git clone https://github.com/laramies/theHarvester
cd theHarvester

依存関係をインストールし、仮想環境を作成:

uv sync

theHarvesterを実行:

uv run theHarvester

開発

開発用依存関係をインストールするには:

uv sync --all-groups

テストを実行するには:

uv run pytest

リンターとフォーマッターを実行するには:

uv run ruff check

uv run ruff format

オプションの /additional/* REST API ルートを保護するには、THEHARVESTER_API_KEY を設定し、同じ値を X-API-Key ヘッダーに渡します。キーが設定されていない場合、これらのルートは 503 を返します。

パッシブモジュール

baidu: Baidu 検索エンジン (https://www.baidu.com)
bevigil: CloudSEK BeVigil がモバイルアプリケーションをスキャンして OSINT アセットを取得 (https://bevigil.com/osint-api)
brave: Brave 検索エンジン - 公式 Brave Search API を使用 (https://api-dashboard.search.brave.com)
bufferoverun: IPv4 空間の TLS 証明書に対する高速ドメイン名検索 (https://tls.bufferover.run)
builtwith: Web サイトが何で構築されているかを調べる (https://builtwith.com)
censys: 証明書検索を使用してサブドメインを列挙し、メールを収集 (https://censys.io)
certspotter: Cert Spotter が証明書透過性ログを監視 (https://sslmate.com/certspotter)
criminalip: 専門的なサイバー脅威インテリジェンス (CTI) 検索エンジン (https://www.criminalip.io)
crtsh: Comodo 証明書検索 (https://crt.sh)
dehashed: データセキュリティを次のレベルへ (https://dehashed.com)
dnsdumpster: ドメインに関連するホストを発見できるドメイン調査ツール (https://dnsdumpster.com)
duckduckgo: DuckDuckGo 検索エンジン (https://duckduckgo.com)
dymo: Dymo API データ検証ツール - ドメインを確認し、タイポ提案や MX/不正シグナルを表面化 (https://dymo.tpeoficial.com)
fofa: FOFA 検索エンジン (https://en.fofa.info)
fullhunt: 次世代攻撃対象領域セキュリティプラットフォーム (https://fullhunt.io)
github-code: GitHub コード検索エンジン (https://www.github.com)
hackertarget: 組織を支援するオンライン脆弱性スキャナーとネットワークインテリジェンス (https://hackertarget.com)

アクティブモジュール

DNS ブルートフォース: 辞書によるブルートフォース列挙
スクリーンショット: 発見されたサブドメインのスクリーンショットを撮影

API キーが必要なモジュール

API キーの設定に関するドキュメントはこちら - https://github.com/laramies/theHarvester/wiki/Installation#api-keys

bevigil - 月50回の無料クエリ。月1,000クエリ $50
brave - 無料プランあり。高制限向けのプロプラン
bufferoverun - 月100回の無料クエリ。月10,000回 $25
builtwith - 全期間で50回の無料クエリ。年額 $2,950
censys - 500クレジット $100
criminalip - 月100回の無料クエリ。月700,000回 $59
dehashed - 500クレジット $15、5,000クレジット $150
dnsdumpster - 1日50回の無料クエリ、$49
dymo - 無料枠あり、高制限向け有料プラン
fofa - 月10,000クエリクレジット。月100,000件の結果 $25
fullhunt - 50回の無料クエリ。200クエリ $29/月、500クエリ $59/月
github-code
haveibeenpwned - メール検索10回/分 $4.50、50回/分 $22
hunter - 月50クレジット無料。年12,000クレジット $34
hunterhow - 30日あたり10,000件の無料API結果。30日あたり50,000件のAPI結果 $10
intelx - 無料アカウントは非常に制限あり。ビジネスアカウント $2,900
leakix - 無料25結果ページ、月3,000 APIリクエスト。Bounty Hunter $29
leaklookup - 20クレジット $10、50クレジット $20、140クレジット $50、300クレジット $100
mojeek - 5,000無料クレジット $6.50、$1.30 CPM（個人）、$2.60 CPM（スタートアップ）、$3.90 CPM（ビジネス）
netlas - 1日50回の無料リクエスト。1,000リクエスト $49、10,000リクエスト $249
onyphe - 月1,000万件の結果 $587
pentesttools - 5アセットネットセキュリティ $95/月、5アセットウェブネットセキュリティ $140/月
projecdiscovery - 業務用メールが必要。サインアップしたメールドメインに対する月次無料ディスカバリと脆弱性スキャン、エンタープライズは料金問い合わせ
rocketreach - 月100件のメール検索 $48、250件のメール検索 $108
securityscorecard - 業務用メールが必要
securityTrails - 月50回の無料クエリ。月20,000クエリ $500
sherlockeye - インターミディエイト $46/月、アドバンスト $120/月。エンタープライズあり
shodan - フリーランサー $69/月、スモールビジネス $359/月
tomba - 月25回の無料検索。月1,000検索 $39、月5,000検索 $89
venacus - 1日1回の無料検索。1日10回 $12、1日30回 $36
virustotal - 1日500回の無料検索、月15,500回。ビジネスアカウントは業務用メールが必要
whoisxml - 2,000クエリ $50、5,000クエリ $105
windvane - 100回の無料クエリ
zoomeye - 1日5件の無料結果。30件/日 $190/年