circl/ail-frameworkAIL framework - фреймворк анализа утечки информации. Проект перемещен на https://github.com/ail-project
Открытая платформа для сбора, обхода, обработки и анализа неструктурированной информации.
AIL framework — это открытая платформа для сбора, обхода, обработки и анализа неструктурированных данных из открытого веба, Tor, I2P, чатов, файлов и внешних источников.
Изначально разработанный в CIRCL, AIL помогает аналитикам превращать сырой, неупорядоченный контент в структурированную информацию с помощью извлечения, тегирования, обнаружения, корреляции и расследований.
AIL (Analysis of Information Leaks) — это открытая платформа для сбора, обхода, обработки и анализа неструктурированной информации. Он поддерживает процессы сбора разведывательной информации, анализа утечек и расследований, помогая аналитикам извлекать, обнаруживать, коррелировать и обмениваться релевантной информацией из широкого круга источников.
AIL включает:
AIL следует практическому рабочему процессу анализа информации:
Сейчас AIL доступен в версии v6.7, и последние выпуски значительно расширили возможности поиска, анализа изображений, обхода и обработки документов.
Основные моменты:
Трекеры — это определённые пользователем правила или шаблоны, которые автоматически обнаруживают, тегируют и уведомляют аналитиков о релевантной информации, собранной AIL.
Поддерживаемые типы трекеров:
Возможности обнаружения включают:
AIL также поддерживает Retro Hunts, позволяя аналитикам запускать вновь созданные правила YARA против исторических данных для выявления ранее пропущенного контента.
AIL создан для аналитиков, которым приходится работать с неупорядоченными, реальными данными:
Вместо того чтобы обрабатывать эти источники по отдельности, AIL помогает превращать их в доступную для поиска, коррелированную и пригодную для действий информацию.
To install the AIL framework:
# Clone the repository
git clone https://github.com/ail-project/ail-framework.git
cd ail-framework
git submodule update --init --recursive
# Install dependencies on Debian/Ubuntu-based distributions
./installing_deps.sh
# Start AIL
cd bin
./LAUNCH.sh -l
Скрипт installing_deps.sh по умолчанию предназначен для дистрибутивов на основе Debian и Ubuntu.
Как подобрать аппаратные требования для AIL?
Некоторые опциональные компоненты требуют дополнительной настройки, включая краулер Lacus, поисковый индексатор Meilisearch и перевод. Обратитесь к HOWTO за подробными инструкциями по настройке.
cd bin
./LAUNCH.sh -l
Веб-интерфейс доступен по адресу:
https://localhost:7000/
Учётные данные по умолчанию хранятся в файле DEFAULT_PASSWORD, и этот файл удаляется после смены пароля.
Учебные материалы по использованию и расширению AIL доступны на ail-project/ail-training.
Информацию о конфиденциальности и соображениях, связанных с GDPR, см. в документе AIL information leaks analysis and the GDPR in the context of collection, analysis and sharing information leaks.
Этот документ содержит рекомендации по использованию AIL в законном контексте, особенно в рамках Общего регламента по защите данных.
Если вы используете AIL в академической работе, вы можете сослаться на него следующим образом:
@inproceedings{mokaddem2018ail,
title={AIL-The design and implementation of an Analysis Information Leak framework},
author={Mokaddem, Sami and Wagener, G{\'e}rard and Dulaunoy, Alexandre},
booktitle={2018 IEEE International Conference on Big Data (Big Data)},
pages={5049--5057},
year={2018},
organization={IEEE}
}
AIL разрабатывается и поддерживается при поддержке Европейского союза в рамках европейского проекта HOPLITE и европейского проекта AIPITCH.
Софинансируется Европейским союзом. Однако выраженные взгляды и мнения принадлежат только автору(ам) и не обязательно отражают взгляды Европейского союза или Европейского центра компетенции по кибербезопасности. Ни Европейский союз, ни предоставляющая финансирование организация не несут за них ответственности.
Copyright (C) 2014 Jules Debra
Copyright (c) 2021 Olivier Sagit
Copyright (C) 2014-2026 CIRCL - Computer Incident Response Center Luxembourg
Copyright (c) 2014-2024 Raphaël Vinot
Copyright (c) 2014-2026 Alexandre Dulaunoy
Copyright (c) 2016-2024 Sami Mokaddem
Copyright (c) 2018-2026 Thirion Aurélien
This program is free software: you can redistribute it and/or modify
it under the terms of the GNU Affero General Public License as published by
the Free Software Foundation, either version 3 of the License, or
(at your option) any later version.
This program is distributed in the hope that it will be useful,
but WITHOUT ANY WARRANTY; without even the implied warranty of
MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
GNU Affero General Public License for more details.
You should have received a copy of the GNU Affero General Public License
along with this program. If not, see <http://www.gnu.org/licenses/>.