w12scan-client

Движок поиска и обнаружения сетевых активов, масштабная идентификация активов, дипломный проект, клиентская программа w12scan

Идея дизайна

Идея клиента заключается в том, что он обрабатывает только те данные (url, ip), которые получил, не выполняя автоматических переходов по 301-редиректам на основе url и не сканируя ip на основе url. Эти действия необходимо выполнять до добавления целей в клиент, например, добавлять http://url, https://url и соответствующие ip, чтобы w12scan мог выполнять агрегированный анализ на основе связанного содержимого.

Описание конфигурации

• Это сканирующий модуль w12scan, написанный на python3. Перед сканированием необходимо установить nmap и masscan и добавить их в переменные окружения. Конечно, если вы используете docker-сборку, этот шаг не требуется.
• В config.py определены параметры сканирования: вы можете задать rate для masscan, сканировать ли все порты (по умолчанию сканируется часть портов), количество потоков, имя узла и т.д.

Сборка через docker

• Все коммиты кода в этом репозитории автоматически компилируются в dockerhub, поэтому вам не нужно скачивать этот репозиторий. Просто следуйте инструкциям на https://github.com/boy-hack/w12scan.
• Если вы хотите изменить конфигурацию самостоятельно, используйте следующие команды в каталоге этого файла:

$docker build -t w12scan-client:latest .
$docker tag w12scan-client:latest boyhack/w12scan-client

Затем следуйте инструкциям на https://github.com/boy-hack/w12scan.

Обновление базы данных IP

• Большинство IP-интерфейсов в сети имеют ограничения по частоте запросов, поэтому данные IP используют GEOIP, но актуальность данных не гарантируется — эту проблему можно решить загрузкой последней базы данных
• https://geolite.maxmind.com/download/geoip/database/GeoLite2-Country.tar.gz
• Поместите её в каталог data/GeoLite2