
Krawlは、カスタマイズ可能で軽量なクラウドネイティブのWebデセプションサーバー兼アンチクローラーです。現実的でランダムに生成されたデコイデータとAI生成のHTMLテンプレートを使用して、低難易度の脆弱性を持つ偽のWebアプリケーションを作成します。
ヒント: さらに楽しむには、robots.txt のパスをクロールしてみてください
Krawl は、悪意のある攻撃者、Webクローラー、自動スキャナーを検出・遅延・分析するために設計されたクラウドネイティブな欺瞞サーバーです。
管理パネル、設定ファイル、露出した偽の認証情報など、簡単に手に入る餌をちりばめたリアルな偽のWebアプリケーションを作成し、疑わしい活動を引き寄せて特定します。

攻撃者のリソースを浪費することで、Krawlは悪意のある行為と正当なクローラーを明確に区別するのに役立ちます。
主な機能:
responses/manifest.yaml にリストされたファイルリバースプロキシを使用すれば、Krawl を他のサービスと並べて簡単に公開し、Web クローラーや悪意のあるユーザーからそれらを保護できます。詳細はリバースプロキシのドキュメントを参照してください。

Krawl は、起動時に生成されるランダムな秘密パス、または KRAWL_DASHBOARD_SECRET_PATH で設定されたカスタムパスからアクセスできる包括的なダッシュボードを提供します。これにより、ダッシュボードはハニーポットをスキャンする攻撃者から隠されます。
ダッシュボードのパスを知っている人なら誰でも、5 つのタブを開くことができます:


脅威: TLSH ファジーハッシュによってキャンペーンごとにグループ化されたペイロード。これにより、ウェブシェルとその編集された亜種が無関係なヒットではなく 1 つのキャンペーンとして読まれ、キャプチャされたすべてのファイルのインデックスも表示されます。
高度な検索: パス、ホスト、IP、リファラー、ユーザーエージェント、メソッド、生のリクエストテキスト、HTTP ヘッダーで保存されたリクエストを検索。
IP インサイト: 選択した IP の詳細なフォレンジックビュー: 地理位置情報、ISP/ASN 情報、レピュテーションフラグ、行動ヘキサゴン、ランク付けされた攻撃タイプ、良好なリクエストと悪意のあるリクエストの数、平均重大度、リファラー履歴、キャプチャされたファイルと認証情報、カテゴリのタイムライン、完全なアクセス履歴。

さらに、ダッシュボードのパスワードで認証すると、保護されたタブが利用可能になります:
ヘッダーのアイコンから、ドキュメント、バンリストのエクスポート、実行中の設定を表示する設定パネル、およびスケジュールされたタスクをオンデマンドで実行するためのメンテナンスページを開くことができます。
詳細はダッシュボードのドキュメントを参照してください。
Krawl は 2 つのデプロイモードをサポートしており、config.yaml の mode 設定または KRAWL_MODE 環境変数で制御されます。
| スタンドアロン | スケーラブル | |
|---|---|---|
| データベース | SQLite (WALモード) | PostgreSQL |
| キャッシュ | インメモリPython dict | Redis (マルチティアTTL) |
| レプリカ | 1 (単一インスタンス) | 1以上 (水平スケーリング) |
| 外部依存 | なし | PostgreSQL + Redis |
| 最適な用途 | 開発、ホームラボ、50万リクエスト未満 | 本番環境、HA、50万リクエスト超 |
スタンドアロン: リクエスト数が少ない開発環境やホームラボに最適です。追加設定は一切不要で、Krawlを実行するだけで動作します。
スケーラブル: 本番環境や高トラフィックのハニーポット向けに設計されています。Helmチャートはデフォルトでこのモードになります。
詳細な設定、Docker Composeの例、Kubernetes/Helmのセットアップ、および段階的な移行手順については、デプロイモードのドキュメントを参照してください。
Krawlは、ハニーポットのトラップを発動させた攻撃者のIPアドレスをまとめたbanlist.txtを定期的に更新・維持しています。このBanlistは毎週公開され、ダウンロード可能です。Krawlを使用していなくても、コミュニティが既知の悪意あるアクターを事前にブロックするのに役立ちます。