theHarvester

关于

theHarvester 是一款简单易用且功能强大的工具，专为红队评估或渗透测试的侦察阶段设计。它通过开源情报（OSINT）收集，帮助确定域名的外部威胁态势。该工具利用多个公共资源收集名称、电子邮件、IP、子域名和 URL，这些资源包括：

软件包版本

安装与依赖

• Python 3.12 或更高版本。
• https://github.com/laramies/theHarvester/wiki/Installation

安装 uv：

curl -LsSf https://astral.sh/uv/install.sh | sh

克隆仓库：

git clone https://github.com/laramies/theHarvester
cd theHarvester

安装依赖并创建虚拟环境：

uv sync

运行 theHarvester：

uv run theHarvester

开发

安装开发依赖：

uv sync --all-groups

运行测试：

uv run pytest

运行代码检查与格式化：

uv run ruff check

uv run ruff format

若要保护可选的 /additional/* REST API 路由，请设置 THEHARVESTER_API_KEY 并在请求头中传递相同的值（X-API-Key）。当未配置密钥时，这些路由会返回 503。

被动模块

• baidu：百度搜索引擎 (https://www.baidu.com)

• bevigil：CloudSEK BeVigil 扫描移动应用以获取 OSINT 资产 (https://bevigil.com/osint-api)

• brave：Brave 搜索引擎 – 现已使用官方 Brave 搜索 API (https://api-dashboard.search.brave.com)

• bufferoverun：针对 IPv4 空间 TLS 证书的快速域名查询 (https://tls.bufferover.run)

• builtwith：了解网站使用了哪些技术 (https://builtwith.com)

• censys：利用证书搜索来枚举子域名并收集电子邮件 (https://censys.io)

• certspotter：Cert Spotter 监控证书透明度日志 (https://sslmate.com/certspotter)

• criminalip：专业网络威胁情报（CTI）搜索引擎 (https://www.criminalip.io)

• crtsh：Comodo 证书搜索 (https://crt.sh)

• dehashed：将数据安全提升到新水平 (https://dehashed.com)

• dnsdumpster：域名研究工具，可发现与域名相关的主机 (https://dnsdumpster.com)

• duckduckgo：DuckDuckGo 搜索引擎 (https://duckduckgo.com)

• dymo：Dymo API 数据验证器 – 确认域名、展示拼写建议及 MX/欺诈信号 (https://dymo.tpeoficial.com)

• fofa：FOFA 搜索引擎 (https://en.fofa.info)

• fullhunt：下一代攻击面安全平台 (https://fullhunt.io)

• github-code：GitHub 代码搜索引擎 (https://www.github.com)

• hackertarget：帮助组织进行在线漏洞扫描和网络情报 (https://hackertarget.com)

• haveibeenpwned：检查你的电子邮件地址是否出现在数据泄露中 (https://haveibeenpwned.com)

主动模块

• DNS 暴力破解：字典爆破枚举
• 截图：对发现的子域名进行截图

需要 API 密钥的模块

API 密钥设置文档请参见：https://github.com/laramies/theHarvester/wiki/Installation#api-keys

• bevigil – 每月 50 次免费查询。每月 1k 次查询 $50
• brave – 提供免费套餐，更高限额有专业版
• bufferoverun – 每月 100 次免费查询。每月 10k 次 $25
• builtwith – 总共 50 次免费查询。$2950/年
• censys – 500 积分 $100
• criminalip – 每月 100 次免费查询。每月 700k 次 $59
• dehashed – 500 积分 $15，5k 积分 $150
• dnsdumpster – 每天 50 次免费查询，$49
• dymo – 提供免费套餐，更高限额有付费计划
• fofa – 查询积分 10,000/月。每月 100k 条结果 $25
• fullhunt – 50 次免费查询。200 次查询 $29/月，500 次查询 $59
• github-code
• haveibeenpwned – 每分钟 10 次电子邮件搜索 $4.50，每分钟 50 次 $22
• hunter – 每月 50 个免费积分。每年 12k 积分 $34
• hunterhow – 每 30 天 10k 次免费 API 结果。每 30 天 50k 次 API 结果 $10
• intelx – 免费账户非常有限。商业账户 $2900
• leakix – 免费 25 页结果，每月 3000 次 API 请求。赏金猎人 $29
• leaklookup – 20 积分 $10，50 积分 $20，140 积分 $50，300 积分 $100
• mojeek – 5000 个免费积分 $6.50，$1.30 CPM（个人），$2.60 CPM（初创），$3.90 CPM（企业）
• netlas – 每天 50 次免费请求。1k 次请求 $49，10k 次请求 $249
• onyphe – 每月 10M 条结果 $587
• pentesttools – 5 个资产（网络安全）$95/月，5 个资产（Web 网络安全）$140/月
• projecdiscovery – 需要工作邮箱。注册邮箱域名每月免费发现和漏洞扫描，企业版另计
• rocketreach – 每月 100 次电子邮件查找 $48，每月 250 次 $108
• securityscorecard – 需要工作邮箱
• securityTrails – 每月 50 次免费查询。每月 20k 次查询 $500
• sherlockeye – 中级 $46/月，高级 $120/月。提供企业版
• shodan – 自由职业者 $69/月，小型企业 $359/月
• tomba – 每月 25 次免费搜索。每月 1k 次搜索 $39，每月 5k 次 $89
• venacus – 每天 1 次免费搜索。每天 10 次搜索 $12，每天 30 次 $36
• virustotal – 每天 500 次免费查询，每月 15.5k 次查询。商业账户需要工作邮箱
• whoisxml – 2k 次查询 $50，5k 次查询 $105
• windvane – 100 次免费查询
• zoomeye – 每天 5 个免费结果。每天 30 个结果 $190/年

评论、错误和请求

• Christian Martorella @laramies [email protected]
• Matthew Brown @NotoriousRebel1
• Jay "L1ghtn1ng" Townsend @jay_townsend1

主要贡献者

• Matthew Brown @NotoriousRebel1
• Jay "L1ghtn1ng" Townsend @jay_townsend1
• Lee Baird @discoverscripts

感谢

• John Matherly – Shodan 项目
• Ahmed Aboul Ela – 子域名名称词典（大和小）