
プロセスとネットワークの接続をマッピングし、クラウドプロバイダーを特定し、ビーコン活動を検出するネットワーク監視ツール
プロセスとネットワーク接続のマッピング、クラウドプロバイダーの識別、ファイアウォールルールの生成を行うネットワーク監視ツール。収集用の軽量エージェント、集約用のサーバー、分析用のパーサーを備えています。
マシン間の概要 — OSバージョン比較、共有IP検出、全ホストにわたるビーコン候補:

ホスト別詳細 — クリティカルアラート (EOL OS、nc.exe が不明IPにビーコン):

ホスト別詳細 — 警告 (ビーコン候補がフラグ):

ホスト別詳細 — 正常 (異常なし):

cargo build --release
# シンプルな収集
cargo run --release -- collect --duration-seconds 300
# DNSルックアップ付き
cargo run --release -- collect --duration-seconds 300 --enable-dns
# 圧縮と暗号化付き
cargo run --release -- collect \
--duration-seconds 300 \
--compress \
--encrypt-key "your-secret-password"
# すべてのレポートを生成
cargo run --release -- parse \
--input connections.jsonl \
--process-summary processes.json \
--cloud-analysis cloud.json \
--firewall-rules-iptables firewall.sh \
--database-export network.sql
# ローカルASN DBを使用したオフライン所有権ルックアップ(ネットワーク呼び出しなし)
cargo run --release -- parse \
--input connections.jsonl \
--cloud-analysis cloud.json \
--asn-db ip2asn-v4.tsv
# 永続キャッシュを使用したライブARINルックアップ(再実行時に既に照会済みのIPをスキップ)
cargo run --release -- parse \
--input connections.jsonl \
--cloud-analysis cloud.json \
--arin-lookup \
--arin-cache arin_cache.json
# クイック5分分析
cargo run --release -- monitor \
--duration-seconds 300 \
--output-dir ./analysis \
--full-analysis
agent バイナリは、最小限のフラグなしデプロイメントターゲットです。すべての設定はビルド時に環境変数を介してバイナリに焼き付けられます。ターゲットに配置し、引数なしで実行するだけです。
AGENT_SERVER="http://10.0.1.5:8080/upload" \
AGENT_KEY="labkey123" \
AGENT_INTERVAL="5" \
AGENT_BATCH="200" \
AGENT_DURATION="0" \
AGENT_DNS="false" \
AGENT_ENCRYPT_KEY="mysecretpassword" \
cargo build --release --bin agent
生成されたバイナリ target/release/agent には外部依存関係がなく、フラグは不要です:
./agent
AGENT_SERVER="https://collector.internal/upload" \
AGENT_KEY="prod-api-key" \
AGENT_DURATION="0" \
AGENT_INTERVAL="30" \
AGENT_COMPRESS="true" \
AGENT_ENCRYPT_KEY="$(cat /etc/gibson/key)" \
cargo build --release --bin agent
cargo run --release -- collect \
--duration-seconds 3600 \
--interval-seconds 10 \
--compress \
--encrypt-key "your-32-char-hex-key-or-password" \
--upload-url "https://your-server.com/api/upload" \
--api-key "your-api-key" \
--batch-size 50 \
--delete-after-upload
cargo run --release -- collect \
--duration-seconds 86400 \
--interval-seconds 30 \
--output connections_daily.jsonl \
--enable-dns \
--compress
パーサーは、未マッチIPの所有者を特定するための相互排他的な2つのパスをサポートしています:
| 方法 |
|---|
ip2asnデータベースのダウンロード (毎週更新):
curl -O https://iptoasn.com/data/ip2asn-v4.tsv.gz && gunzip ip2asn-v4.tsv.gz
--asn-db が指定された場合、--arin-lookup は無視されます。--arin-cache を使用してARIN結果をディスクに永続化すると、再実行時に既に照会済みのIPをスキップできます。
# クラウド検出に焦点を当てた解析
cargo run --release -- parse \
--input connections.jsonl \
--cloud-analysis cloud_report.json \
--min-connections 5 \
--whitelist-processes "chrome,firefox,safari,edge"
collector_server.py を作成:
from flask import Flask, request, jsonify
import os
import json
import base64
from datetime import datetime
from Crypto.Cipher import AES
import gzip
app = Flask(__name__)
# Configuration
UPLOAD_DIR = "./collected_data"
API_KEY = "your-secure-api-key"
ENCRYPTION_KEY = bytes.fromhex("your-32-byte-hex-key") # Optional
os.makedirs(UPLOAD_DIR, exist_ok=True)
def decrypt_data(encrypted_data, key):
"""Decrypt AES-256-GCM encrypted data"""
decoded = base64.b64decode(encrypted_data)
nonce = decoded[:12]
ciphertext = decoded[12:]
cipher = AES.new(key, AES.MODE_GCM, nonce=nonce)
plaintext = cipher.decrypt_and_verify(ciphertext[:-16], ciphertext[-16:])
return plaintext
@app.route('/api/upload', methods=['POST'])
def upload():
# Verify API key
if request.headers.get('X-API-Key') != API_KEY:
return jsonify({"error": "Invalid API key"}), 401
try:
data = request.get_data()
# If data is base64 encoded (encrypted)
if data.startswith(b'eyJ'): # JSON starts with {"
# Not encrypted, parse directly
batch = json.loads(data)
else:
# Encrypted data
decrypted = decrypt_data(data, ENCRYPTION_KEY)
batch = json.loads(decrypted)
# Save to file
hostname = batch.get('hostname', 'unknown')
timestamp = datetime.now().strftime('%Y%m%d_%H%M%S')
filename = f"{UPLOAD_DIR}/{hostname}_{timestamp}.json"
with open(filename, 'w') as f:
json.dump(batch, f)
return jsonify({"status": "success", "file": filename}), 200
except Exception as e:
return jsonify({"error": str(e)}), 500
if __name__ == '__main__':
app.run(host='0.0.0.0', port=5000, ssl_context='adhoc') # Use proper SSL in production
以下のコマンドで実行:
pip install flask pycryptodome
python collector_server.py
/etc/nginx/sites-available/collector を作成:
server {
listen 443 ssl;
server_name collector.yourcompany.com;
ssl_certificate /etc/ssl/certs/your-cert.pem;
ssl_certificate_key /etc/ssl/private/your-key.pem;
client_max_body_size 100M;
location /upload {
# API key validation
if ($http_x_api_key != "your-secure-api-key") {
return 403;
}
# Save uploaded files
client_body_in_file_only on;
client_body_temp_path /var/uploads/;
# Pass to processing script
proxy_pass http://localhost:8080;
proxy_set_header X-File $request_body_file;
}
}
// index.js for AWS Lambda
const AWS = require('aws-sdk');
const crypto = require('crypto');
const s3 = new AWS.S3();
const BUCKET_NAME = 'your-network-data-bucket';
const API_KEY = process.env.API_KEY;
const ENCRYPTION_KEY = Buffer.from(process.env.ENCRYPTION_KEY, 'hex');
exports.handler = async (event) => {
// Verify API key
if (event.headers['X-API-Key'] !== API_KEY) {
return {
statusCode: 401,
body: JSON.stringify({ error: 'Invalid API key' })
};
}
try {
let data = event.body;
// Decrypt if needed
if (!data.startsWith('{')) {
// Encrypted data
const encrypted = Buffer.from(data, 'base64');
const nonce = encrypted.slice(0, 12);
const ciphertext = encrypted.slice(12);
const decipher = crypto.createDecipheriv('aes-256-gcm', ENCRYPTION_KEY, nonce);
const decrypted = Buffer.concat([
decipher.update(ciphertext.slice(0, -16)),
decipher.final()
]);
data = decrypted.toString();
}
const batch = JSON.parse(data);
const key = `${batch.hostname}/${Date.now()}_${batch.batch_id}.json`;
await s3.putObject({
Bucket: BUCKET_NAME,
Key: key,
Body: data,
ContentType: 'application/json'
}).promise();
return {
statusCode: 200,
body: JSON.stringify({ status: 'success', key })
};
} catch (error) {
return {
statusCode: 500,
body: JSON.stringify({ error: error.message })
};
}
};
主要なシステムにコレクターをデプロイ:
# Windows エンドポイント
gibson.exe collect --duration-seconds 3600 --upload-url https://sec.company.com/upload --api-key KEY
# Linux サーバー
./gibson collect --duration-seconds 7200 --compress --upload-url https://sec.company.com/upload
Linuxでsystemdサービスを使用:
# /etc/systemd/system/network-monitor.service
[Unit]
Description=ネットワーク接続モニター
After=network.target
[Service]
Type=simple
User=monitor
ExecStart=/opt/monitor/gibson collect \
--duration-seconds 3600 \
--compress \
--encrypt-key ${ENCRYPT_KEY} \
--upload-url https://collector.internal/upload \
--api-key ${API_KEY}
Restart=always
[Install]
WantedBy=multi-user.target
FROM rust:1.75 as builder
WORKDIR /app
COPY . .
RUN cargo build --release
FROM debian:bookworm-slim
RUN apt-get update && apt-get install -y ca-certificates
COPY --from=builder /app/target/release/gibson /usr/local/bin/
CMD ["gibson", "collect", "--duration-seconds", "3600", "--upload-url", "${UPLOAD_URL}"]
{
"process_name": "chrome",
"pid": 1234,
"total_connections": 45,
"unique_remote_ips": ["1.2.3.4", "5.6.7.8"],
"cloud_providers": {
"AWS": {
"connection_count": 12,
"services": {"CloudFront": 8, "S3": 4}
}
},
"risk_score": 0.5
}
{
"AWS": {
"provider": "AWS",
"unique_ips": ["52.84.1.2", "54.230.3.4"],
"unique_domains": ["d1234.cloudfront.net"],
"services": {"CloudFront": 15, "S3": 3},
"total_connections": 18
}
}
# 生成されたファイアウォールルール
# 許可: 既知のクラウドプロバイダー
iptables -A OUTPUT -p tcp -d 52.84.0.0/14 -j ACCEPT -m comment --comment "chrome to AWS"
iptables -A OUTPUT -p tcp -d 104.16.0.0/12 -j ACCEPT -m comment --comment "firefox to Cloudflare"
--interval-seconds 30 を使用--enable-dns フラグ)MIT
プルリクエスト歓迎。
| 変数 | デフォルト | 説明 |
|---|
AGENT_SERVER | http://localhost:8080/upload | アップロードエンドポイントURL |
AGENT_KEY | (なし) | X-API-Key ヘッダー値 |
AGENT_INTERVAL | 5 | ソケットポーリング間隔(秒) |
AGENT_BATCH | 200 | アップロードバッチあたりのレコード数 |
AGENT_DURATION | 0 | 実行時間(秒)(0 = 永続実行) |
AGENT_DNS | false | IPをホスト名に解決 |
AGENT_ESTABLISHED | true | ESTABLISHED接続のみ |
AGENT_LOCAL_COPY | false | アップロードと同時にローカルの.jsonlコピーを保持 |
AGENT_COMPRESS | false | アップロード前にGzip圧縮 |
AGENT_ENCRYPT_KEY | (なし) | AES-256-GCM暗号化ペイロード(パスワードまたは64文字の16進キー) |
AGENT_UA | (reqwestデフォルト) | HTTP User-Agent ヘッダー |
| フラグ |
|---|
| 速度 |
|---|
| ネットワーク |
|---|
| 最適な用途 |
|---|
| ローカルASN DB | --asn-db | 即時 | なし | 繰り返し分析、エアギャップ環境 |
| ライブARIN RDAP | --arin-lookup | 遅い (IPごと) | あり | 1回限りのルックアップ、ローカルDBが利用不可 |