
DShield Sensor Log Collection with ELK
Это форк и существенное обновление первоначальной публикации на сайте ISC Storm Center, сделанной Скоттом Дженсеном в виде статьи BACS, а также скриптов, опубликованных на Github.
https://github.com/fkadriver/Dshield-ELK
https://isc.sans.edu/diary/DShield+Sensor+Monitoring+with+a+Docker+ELK+Stack+Guest+Diary/30118
Это хороший справочник по использованию DShield-SIEM для анализа: https://isc.sans.edu/diary/30962/
Здесь представлен обзор того, как выполняется сбор журналов с помощью сенсора DShield.
https://github.com/bruneaug/DShield-SIEM/blob/main/Troubleshooting/DShield-SIEM-Flow.png
Этот docker специально создан для использования с DShield Honeypot для сбора и разбора журналов и сбора данных, чтобы упростить поиск в исследовательских целях. Рекомендуемая установка — установить сенсор DShield на Raspberry с ОС PI Raspbian или на систему под управлением Ubuntu 24.04 LTS в вашей сети или в облаке на ваш выбор.
Примечание: Согласно приведённой ниже инструкции, это должно быть установлено на отдельном сервере.
Примечание: Чтобы обновить компоненты сервера ELK, выполните следующие шаги:
https://github.com/bruneaug/DShield-SIEM/blob/main/README.md#download-github-update
Установите docker от имени пользователя (учётной записи $):
sudo apt-get install ca-certificates curl gnupg network-manager txt2html
sudo install -m 0755 -d /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
sudo chmod a+r /etc/apt/keyrings/docker.gpg
Note: You may need to take the next line, remove the backlash () and put everythin in a single line in Notepad to run this echo.
echo "deb [arch="$(dpkg --print-architecture)" signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu \
"$(. /etc/os-release && echo "$VERSION_CODENAME")" stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt update && sudo apt upgrade
sudo reboot (if update were applied)
sudo apt-get install -y jq docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin pip
sudo systemctl enable docker
sudo systemctl start docker.service
Убедитесь, что служба Docker запущена
sudo systemctl status docker.service
Добавьте следующее имя сервера ELK es01 kibana fleet-server heartbeat logstash filebeat filebeat01
в /etc/hosts после IP-адреса и имени сервера:
sudo vi /etc/hosts
Добавьте это в /etc/hosts после IP-адресов сервера ELK
127.0.0.1 sensor es01 ...
192.168.25.80 sensor es01 ...
es01 kibana fleet-server heartbeat logstash filebeat filebeat01
Отредактируйте файл sysctl.conf:
sudo vi /etc/sysctl.conf
Добавьте следующее в конец файла:
vm.max_map_count=262144
Добавьте сохранение. Это для Elasticsearch при использовании Docker.
sudo iptables -nL

Используя учётную запись пользователя ($), выполните следующие команды:
git clone https://github.com/bruneaug/DShield-SIEM.git
mkdir scripts
mv DShield-SIEM/AddOnScripts/*.sh scripts
chmod 754 scripts/*.sh
cd ~/DShield-SIEM
Примечание: Перед установкой вы можете отредактировать файл .env (используйте ls -la, чтобы увидеть его), чтобы внести любые желаемые изменения.
- Текущий пароль по умолчанию для elastic — student
Ограничения памяти в .env — это максимальный объём памяти, который docker выделит для каждого из контейнеров ELK.
По умолчанию 3 ГБ для Elasticsearch, но его можно увеличить, если у вас есть ресурсы
Отредактируйте файл .env и настройте его под свой собственный стек ELK
vi .env
cd logstash/pipeline
Отредактируйте heartbeat.yml, заменив IP-адрес сенсора (обозначенный как PI) на собственный IP-адрес сенсора. Kibana heartbeat проверяет состояние ваших сервисов и определяет, доступны ли они.
Обновите этот IP-адрес и имя хоста в соответствии с вашим сенсором.
Примечание: Вы можете скопировать и добавить те же 5 строк, если у вас есть более одного сенсора, который вы хотели бы отслеживать
Это можно просмотреть в разделе Observability -> Uptime Monitors

Эта строка — IP-адрес сенсора. Если при подключении к TCP 12222 не будет получен ответ, он будет отмечен в интерфейсе как недоступный.
Проверку инициирует сервер ELK, чтобы проверить ответ от сенсора.
Обновите эту строку: hosts: ["192.168.25.165"]
vi ~/DShield-SIEM/heartbeat/heartbeat.yml
Откройте для себя самые используемые инструменты нашего сообщества.
Данных о популярности пока нет.