SOCMIntelligence

Многоплатформенный веб-инструмент SOCMINT / OSINT.

---

Что это такое

SOCMIntelligence собирает публичные данные с множества платформ, превращает каждый результат в диаграммы, таблицы находок и граф связей и объединяет всё в единый кросс-платформенный граф идентичностей. Поскольку один и тот же аккаунт получает одинаковый ID узла везде, email, домен или имя пользователя, встречающиеся в двух разных сканированиях, автоматически связываются — так вы видите, кто есть кто в разных сервисах.

Модули

Группа	Модули
Социальные сети	X (Twitter) · Instagram · Bluesky · LinkedIn · YouTube · TikTok · Twitch · Kick · Snapchat · Reddit · Mastodon · Telegram · Discord · Steam
Для разработчиков	GitHub · GitLab · Stack Exchange · Hacker News
Идентичность и архивы	Keybase · Gravatar · Wayback Machine
Поиск и карта	Поиск по ключевым словам (Bluesky · Reddit · Mastodon) · Карта хэштегов

Каждый модуль читает только публичные данные (или официальный API, если указан ключ). Никакого скрейпинга учётных данных/сессий приватных аккаунтов нет.

Возможности

• Граф связей — силовой граф D3, объединяющий каждое успешное сканирование. Кросс-платформенные совпадения (общий email, домен, имя пользователя), пивотирование (двойной клик по узлу для его сканирования в нужном модуле), поиск, фильтры по типу, экспорт в PNG/JSON.
• Хронология — посты, комментарии, загрузки и события создания аккаунтов всех аккаунтов на одной оси, плюс тепловая карта пересечения часов и таблица схожести часов.
• Сопоставление идентичностей — оценка «тот же человек?» от 0 до 100 для каждой пары аккаунтов с обоснованиями (верифицированная/криптографическая связь, общий email, схожесть имени пользователя и отображаемого имени, общий личный домен, pHash аватара, часы активности). Пары с оценкой ≥ 40 отображаются на графе.
• Сравнение — сопоставление 2+ просканированных аккаунтов одного модуля бок о бок (таблица KPI + столбчатая диаграмма, наибольшее значение выделено).
• Пометки аналитика — отмечайте узлы графа как Verified / Suspicious / Dismissed, добавляйте заметки, добавляйте ручные узлы и связи. Всё сохраняется в дело.
• Управление делами — создайте дело, активируйте его, и сканирования/пометки/заметки сохраняются автоматически. Импорт/экспорт пакета .socmint.
• Отслеживание изменений (Мониторинг) — повторное сканирование целей по расписанию с записью того, что изменилось (поля, новые/удалённые связи).
• Целостность доказательств — необработанные данные каждого сканирования хешируются (SHA-256 по каноническому JSON) в момент сбора; кнопка проверки доказывает, были ли они изменены.
• Экспорт — отчёт HTML / PDF, Excel (.xlsx), GraphML (Gephi/yEd), GEXF (Gephi), Maltego CSV, JSON.
• Английский интерфейс — весь интерфейс, отчёты, электронные таблицы и подписи диаграмм на английском языке.
• Страница настроек — ключи API, прокси / Tor / ротация списка прокси и ограничения скорости, всё управляется из интерфейса вместо .env.

Установка

pipx (рекомендуется на Linux)

pipx install socmintelligence
socmintelligence

или с помощью pip внутри virtualenv:

pip install socmintelligence
socmintelligence

Затем откройте http://localhost:8000. Параметры: socmintelligence --host 0.0.0.0 --port 8000 --data-dir ~/socmint-data --no-browser. Данные (дела, настройки) хранятся в ~/.local/share/socmintelligence, если не задан --data-dir или SOCMINT_DATA_DIR.

Прямо из GitHub: pipx install git+https://github.com/emrekybs/SOCMIntelligence

Быстрый старт (из исходников)

python3 -m venv .venv && source .venv/bin/activate
pip install -r requirements.txt
uvicorn server:app --host 0.0.0.0 --port 8000

Затем откройте http://localhost:8000 — документация API доступна по адресу http://localhost:8000/docs.

При последующих запусках достаточно выполнить:

source .venv/bin/activate && uvicorn server:app --port 8000

Docker: docker compose up --build (один сервис).

Конфигурация

Вся конфигурация находится на странице Settings (сохраняется в data/settings.json; .env по-прежнему читается, но приоритет у Settings):

• API-ключи — хранятся на сервере и никогда не возвращаются в браузер (показываются только «set» + последние 4 символа).
  • YOUTUBE_API_KEY — обязателен для модуля YouTube.
  • HIKERAPI_TOKEN — Instagram (HikerAPI). Без него модуль Instagram показывает явно помеченные демонстрационные данные.
  • X_BEARER_TOKEN — X (Twitter) API v2. Без него модуль X показывает явно помеченные демонстрационные данные, чтобы вы могли оценить результат до добавления токена.
  • STEAM_API_KEY, STACKEXCHANGE_KEY, GRAVATAR_API_KEY, GITLAB_TOKEN — необязательны, открывают доступ к дополнительным данным.
• Прокси / Tor — выключено, Tor, один пользовательский прокси или список прокси, который циклически переключается при каждом сканировании (распределяет лимиты запросов).
• Rate — количество параллельных сканирований и задержка между запросами.

Примечания

• X (Twitter): бесплатный тариф X очень ограничен — даже с токеном история постов на некоторых тарифах может возвращаться пустой; модуль помечает такой случай.
• Telegram читает только публичный предпросмотр t.me/s/ (без входа).
• Gravatar получает только MD5/SHA-256-хеш email, но никогда сам email.
• TikTok часто ограничивает частоту запросов/блокирует ботов; модуль повторяет попытки и отличает реальное «не найдено» от временной блокировки.
• Распределения по времени указаны в UTC. «Рост» подписчиков TikTok — это оценка (помечена как таковая), а не реальная история.

Лицензия

Apache License 2.0 — см. LICENSE.