
DShieldセンサーログ収集(ELK対応)
これは、Scott Jensen による ISC Storm Center ウェブサイトでの BACS 論文としての最初の公開、および Github で公開されたスクリプトからのフォークであり、大幅な更新版です。
https://github.com/fkadriver/Dshield-ELK
https://isc.sans.edu/diary/DShield+Sensor+Monitoring+with+a+Docker+ELK+Stack+Guest+Diary/30118
DShield-SIEM を分析に使用する方法に関する優れた参考資料はこちらです: https://isc.sans.edu/diary/30962/
これは、DShield センサーによるログ収集がどのように行われるかの概要を示しています。
https://github.com/bruneaug/DShield-SIEM/blob/main/Troubleshooting/DShield-SIEM-Flow.png
この docker は、DShield Honeypot と共に使用してログを収集・解析し、研究目的での検索を容易にするためにデータを収集するようカスタムビルドされています。推奨されるインストール方法は、PI Raspbian OS を使用した Raspberry 上、または Ubuntu 24.04 LTS を実行するシステム上に DShield センサーをインストールすることです。これはネットワーク内でも、お好みのクラウド上でもかまいません。
注: 以下に示す手順に従い、これは別のサーバーにインストールする必要があります。
注: ELK サーバーコンポーネントを更新するには、次の手順に従ってください:
https://github.com/bruneaug/DShield-SIEM/blob/main/README.md#download-github-update
ユーザー ($) アカウントとして docker をインストールします:
sudo apt-get install ca-certificates curl gnupg network-manager txt2html
sudo install -m 0755 -d /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
sudo chmod a+r /etc/apt/keyrings/docker.gpg
Note: You may need to take the next line, remove the backlash () and put everythin in a single line in Notepad to run this echo.
echo "deb [arch="$(dpkg --print-architecture)" signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu \
"$(. /etc/os-release && echo "$VERSION_CODENAME")" stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt update && sudo apt upgrade
sudo reboot (if update were applied)
sudo apt-get install -y jq docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin pip
sudo systemctl enable docker
sudo systemctl start docker.service
Docker サービスが実行中であることを確認する
sudo systemctl status docker.service
IP アドレスとサーバー名の後に、以下の ELK サーバー名 es01 kibana fleet-server heartbeat logstash filebeat filebeat01 を
/etc/hosts に追加します:
sudo vi /etc/hosts
ELKサーバーのIPアドレスの後に、これを /etc/hosts に追加してください
127.0.0.1 sensor es01 ...
192.168.25.80 sensor es01 ...
es01 kibana fleet-server heartbeat logstash filebeat filebeat01
sysctl.conf ファイルを編集します:
sudo vi /etc/sysctl.conf
ファイルの末尾に以下を追加します:
vm.max_map_count=262144
保存してください。これは Docker を使用する場合の Elasticsearch 向けです。
sudo iptables -nL

ユーザー ($) アカウントを使用して、以下のコマンドを実行します:
git clone https://github.com/bruneaug/DShield-SIEM.git
mkdir scripts
mv DShield-SIEM/AddOnScripts/*.sh scripts
chmod 754 scripts/*.sh
cd ~/DShield-SIEM
注: インストール前に、.env ファイル(ls -la で確認できます)を編集して、必要な変更を加えることができます。
- elastic の現在の デフォルトパスワード は student です
.env のメモリ制限は、docker が各 ELK コンテナに割り当てる最大メモリ量です。
Elasticsearch のデフォルトは 3GB ですが、リソースがあれば拡張できます
.env ファイルを編集して、独自の ELK Stack 用に設定してください
vi .env
cd logstash/pipeline
heartbeat.yml を編集して、センサー IP(PI という名前)を自身のセンサー IP に変更します。Kibana heartbeat はサービスのステータスをチェックし、それらが利用可能かどうかを判断します。
この IP とホスト名を自身のセンサーを反映するように更新してください。
注: 監視したいセンサーが複数ある場合は、同じ 5 行をコピーして追加できます
これは Observability -> Uptime Monitors で確認できます

この行はセンサーの IP アドレスです。TCP 12222 への接続時に応答を受信できない場合、インターフェース上でダウンとしてマークされます。
これは ELK サーバーが開始し、センサーからの応答を確認します。
この行を更新してください: hosts: ["192.168.25.165"]
vi ~/DShield-SIEM/heartbeat/heartbeat.yml
スクリプト change_perms.sh は、docker コンポーネントのインストールを開始する前に一部のファイルを設定します。
このスクリプトは、ダッシュボードのクエリで使用される IP アドレスを、お使いの ELK スタックの IP に更新します。
~/scripts/change_perms.sh
~/scripts/get_researchers.sh
次に、docker compose を実行して ELK サーバーアプリケーションをビルドします。
これにより、Kibana、Elasticsearch、elastic-agent、Logstash がビルドされ、Cowrie パーサー、設定ファイル、ダッシュボードが読み込まれます。
sudo docker compose up -d
インストール完了
sudo cp /var/lib/docker/volumes/dshield-elk_certs/_data/ca/ca.crt /usr/local/share/ca-certificates/dshield.crt
sudo update-ca-certificates
これにより、DShield SIEMダッシュボードとSIEMシグネチャがKibanaに読み込まれます。
~/scripts/dashboard-setup.sh
このコマンドは、Elasticsearch のすべてのコンポーネントがインストールされた後に使用されている docker ディレクトリの一覧を表示します。
Elasticsearch にデータが追加されると、以下のコマンドまたは ELK 内で、ストレージに利用可能なディスク容量を監視することもできます。
sudo du --human-readable --max-depth 1 --no-dereference --one-file-system /var/lib/docker
