Skip to content
KitploitKITPLOIT
工具漏洞利用博客
Log in
提交
工具漏洞利用博客
提交

黑客、渗透测试和网络安全工具,武装您的安全武器库!

Kitploit 是一个黑客、网络安全和渗透测试工具的目录。发现最新的项目更新,查找漏洞、分析系统、自动化测试并加强你的安全。

订阅源联系隐私© 2026 Kitploit

工具目录

分类

查看所有分类
Loading categories
DShield-SIEM — DShield 传感器日志采集与 ELK | Kitploit
工具/GitHubGitHub/bruneaug/dshield-siem
防御工具威胁源与聚合器网络安全威胁情报入侵检测事件响应日志分析
GitHubbruneaug/dshield-siem

DShield-SIEM

DShield 传感器日志采集与 ELK

查看仓库
5510571个月前Kitploit 审核通过
分享

使用 Elasticsearch 进行 DShield 传感器日志收集

简介

这是对 Scott Jensen 在 ISC Storm Center 网站上最初以 BACS 论文形式发布的内容以及 Github 上发布的脚本的 fork 和重大更新。
https://github.com/fkadriver/Dshield-ELK
https://isc.sans.edu/diary/DShield+Sensor+Monitoring+with+a+Docker+ELK+Stack+Guest+Diary/30118

这是关于如何使用 DShield-SIEM 进行分析的良好参考:https://isc.sans.edu/diary/30962/

DShield SIEM 网络流量

这提供了使用 DShield 传感器进行日志收集的概述。
https://github.com/bruneaug/DShield-SIEM/blob/main/Troubleshooting/DShield-SIEM-Flow.png

为什么使用它?

此 docker 是定制构建的,用于配合 DShield Honeypot 收集和解析日志并收集数据,以便于为研究目的进行搜索。建议的安装方式是在使用 PI Raspbian OS 的 Raspberry 上或运行 Ubuntu 24.04 LTS 的系统上安装 DShield 传感器,该系统可以位于您的网络中或您选择的云中。

注意:按照以下说明,必须将其安装在单独的服务器上。

  • 此已在 Ubuntu 24.04 和 26.04 LTS 或 Proxmox LXC 容器上测试过
  • 步骤 1 构建 Ubuntu
  • 步骤 2 安装 docker 和 ELK
  • 步骤 3 在 DShield 传感器上安装和配置 Filebeat

Ubuntu 设置

与企业环境一样,像 DShield SIEM 这样收集安全日志并监控网络的系统需要安装在单独的服务器上,而不是与 DShield 传感器安装在一起。

  • Ubuntu 24.04 LTS Live Server 64 位
  • 最低 10+ GB - 建议 12 GB RAM
    • 如果分配给每个容器(见下文)的 RAM 超过 2GB,请考虑增加服务器 RAM 容量。
  • 4-8 核
  • 添加 2 个分区,一个用于操作系统,另一个用于 docker
  • 为 /var/lib/docker 分配至少 300 GB 的分区
  • Ubuntu 重启后,设置 docker 分区
  • 向 VM 添加 300 GB 分区

Elastic 已安装的软件包

ELK 当前版本:8.19.15(更新于 2026 年 4 月 30 日)

  • Kibana
  • Elasticsearch
  • Logstash
  • Elastic-Agent
  • Filebeat
  • Heartbeat
  • Metricbeat

附加软件

  • CyberChef
  • Mitre ATT&CK - Attack Navigator

注意:要更新 ELK 服务器组件,请按照以下步骤操作:
https://github.com/bruneaug/DShield-SIEM/blob/main/README.md#download-github-update

安装 docker

以用户 ($) 账户安装 docker:

sudo apt-get install ca-certificates curl gnupg network-manager txt2html
sudo install -m 0755 -d /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
sudo chmod a+r /etc/apt/keyrings/docker.gpg
Note: You may need to take the next line, remove the backlash () and put everythin in a single line in Notepad to run this echo.
echo "deb [arch="$(dpkg --print-architecture)" signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu \
"$(. /etc/os-release && echo "$VERSION_CODENAME")" stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt update && sudo apt upgrade
sudo reboot (if update were applied)
sudo apt-get install -y jq docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin pip
sudo systemctl enable docker
sudo systemctl start docker.service

确认 docker 服务正在运行

sudo systemctl status docker.service

更新 /etc/hosts

在 /etc/hosts 中,将以下 ELK 服务器名 es01 kibana fleet-server heartbeat logstash filebeat filebeat01
添加到 IP 地址和服务器名之后:

sudo vi /etc/hosts

在 ELK 服务器 IP 地址之后,将以下内容添加到 /etc/hosts
127.0.0.1 sensor es01 ...
192.168.25.80 sensor es01 ...

es01 kibana fleet-server heartbeat logstash filebeat filebeat01

添加到 sysctl vm.max_map_count

编辑 sysctl.conf 文件:

sudo vi /etc/sysctl.conf

在文件底部添加以下内容:

vm.max_map_count=262144

添加并保存。这是针对使用 Docker 时的 Elasticsearch。

确保防火墙已关闭

sudo iptables -nL

image

配置并安装 DShield ELK

使用用户($)账户,运行以下命令:

git clone https://github.com/bruneaug/DShield-SIEM.git
mkdir scripts
mv DShield-SIEM/AddOnScripts/*.sh scripts
chmod 754 scripts/*.sh
cd ~/DShield-SIEM

注意:安装前,你可以编辑 .env 文件(使用 ls -la 查看)以进行任何所需的更改。
- elastic 当前的_默认密码_为 student
.env 中的内存限制是 docker 为每个 ELK 容器分配的最大内存。
Elasticsearch 默认为 3GB,但如果你有足够的资源,可以扩大该值
编辑 .env 文件并根据你自己的 ELK Stack 进行配置

vi .env
  • 更新 .env 文件中的以下变量,使其与你的 ELK 服务器 DNS 信息、主机名、IP 以及默认 elastic 密码(如果你想更改的话)相匹配:
    • HOSTNAME="ubuntu"
    • DNS_SERVER="9.9.9.9"
    • IPADDRESS="192.168.25.231"
    • ELASTIC_PASSWORD=student
    • ES_MEM = Elasticsearch -> 4g,KB_MEM = Kibana -> 2g
  • 更改下面列出的 3 个 logstash 文件中的默认 nameserver 信息(192.168.25.2 和 192.168.25.3),以及你本地私有网络的 DNS 和位置(使用 Google Maps 获取目标地址,即 DShield 传感器映射——当前设置为 Ottawa, Canada),在加载 docker 之前编辑以下文件:
  cd logstash/pipeline
  • logstash-200-filter-cowrie.conf
  • logstash-201-filter-iptables.conf
  • logstash-202-filter-cowrie-webhoneypot.conf
    将默认配置更改为在 DShied SIEM 中具有准确信息,编辑每个文件并进行修改。

配置 ELK 基础设施监控

编辑 heartbeat.yml,将传感器 IP(名为 PI)更改为你自己的传感器 IP。Kibana heartbeat 会检查你服务的状态并确定它们是否可用。
更新此 IP 和主机名以反映你的传感器。 注意:如果你有多个传感器需要监控,可以复制并添加相同的 5 行

可在 Observability -> Uptime Monitors 中查看
image

此行是传感器 IP 地址。如果在连接 TCP 12222 时未收到响应,它将在界面中将其标记为 down。
这由 ELK 服务器发起,用于检查来自传感器的响应。
更新此行:hosts: ["192.168.25.165"]

vi ~/DShield-SIEM/heartbeat/heartbeat.yml

脚本 change_perms.sh 将在开始安装 docker 组件之前配置部分文件。
该脚本还会将仪表板查询中使用的 IP 地址更新为你的 ELK 栈的 IP 地址。

~/scripts/change_perms.sh
~/scripts/get_researchers.sh

现在执行 docker compose 来构建 ELK 服务器应用程序。
这将构建:Kibana、Elasticsearch、elastic-agent、Logstash,并加载 Cowrie 解析器、配置文件和仪表板。

sudo docker compose up -d

安装完成

image

将 ca.crt 添加到服务器受信任证书

  • 将 ca.crt 添加到服务器受信任证书列表
sudo cp /var/lib/docker/volumes/dshield-elk_certs/_data/ca/ca.crt /usr/local/share/ca-certificates/dshield.crt
  • 更新受信任的证书
sudo update-ca-certificates

向 Kibana 添加仪表板与 SIEM 签名

此操作会将 DShield SIEM 仪表板和 SIEM 签名加载到 Kibana 中。

~/scripts/dashboard-setup.sh

Docker 目录列表

此命令显示在所有 Elasticsearch 组件安装完成后所使用的 docker 目录列表。
随着数据被添加到 Elasticsearch,您还可以通过以下命令或在 ELK 中监控可用于存储的磁盘空间量。

sudo du --human-readable --max-depth 1 --no-dereference --one-file-system /var/lib/docker

image

下载工具

最受欢迎

查看全部 →

发现我们社区最常用的工具。

  • 1

    OsintHunter

    letox4/osinthunter

    🎯 终极 OSINT 工具包:调查图谱、置信度评分、别名家族、地图、时间线和报告。49 个模块、400+ 个站点,无需 API 密钥。

    786
  • 2

    ghostlock-app

    yukonga/ghostlock-app

    GhostLock 一键执行应用(CVE-2026-43499)

    506
  • 3

    ARTEX

    baarai/artex

    基于LLM的多智能体自主渗透测试平台,具备规划器/执行器智能体、资产与探索图谱、MITM流量记录以及漏洞复测功能。

    429
  • 4

    redforge

    cybersecurity91/redforge

    浏览器端红队工具包,包含 102 个离线工具,用于侦察、载荷生成、凭据攻击、加密、编码和交战报告。

    345
  • 5

    CyberStrikeAI

    ed1s0nz/cyberstrikeai

    AI原生网络安全的行动系统——在这里,意图转化为受治理的执行,证据沉淀为运营记忆,每一次操作都让下一次更出色。

    262
  • 6

    looking-glass

    anonghosty/looking-glass

    CSIRT 平台,可将 Shadowserver 报告导入 MongoDB,并将其重放为交互式地图、分析、发现、公告和高管仪表板。

    256

探索所有工具

浏览我们的工具集合

查看所有工具 →