Apache NiFi

Статус

Ресурсы

Контакты

Сообщество

Возможности

Apache NiFi — это простая в использовании, мощная и надёжная система для обработки и распределения данных.

NiFi автоматизирует кибербезопасность, наблюдаемость, потоки событий и конвейеры данных для генеративного ИИ, а также их распространение для тысяч компаний по всему миру в любой отрасли.

• Пользовательский веб-интерфейс
  • Бесшовный опыт для проектирования, управления и мониторинга
  • Управление выполнением и конвейеры с управлением версиями
  • Безопасность по умолчанию с HTTPS
• Масштабируемая обработка
  • Настраиваемая приоритизация для пропускной способности и задержки
  • Гарантированная доставка с повторными попытками и стратегиями отката
  • Горизонтальное масштабирование с кластеризацией
• Отслеживание происхождения данных
  • Поисковая история с настраиваемыми атрибутами
  • Граф происхождения данных от источника до назначения
  • Метаданные и содержимое для каждого решения по обработке
• Расширяемый дизайн
  • Плагинный интерфейс для процессоров и сервисов контроллера
  • Поддержка процессоров на нативном Python
  • REST API для оркестрации и мониторинга
• Безопасная конфигурация
  • Единый вход с OpenID Connect или SAML 2
  • Гибкие политики авторизации для ролевого доступа
  • Зашифрованная связь с TLS и SFTP

Требования

NiFi поддерживает современные операционные системы и требует свежих версий языков для разработки и запуска приложения.

Требования к платформе

• Java 21

Опциональные зависимости

• Python 3.10 или выше

Проекты

Исходный репозиторий включает несколько компонентных проектов.

Пожалуйста, ознакомьтесь с документацией каждого проекта для получения дополнительной информации.

• Apache NiFi
• Apache NiFi Registry
• Apache NiFi MiNiFi

Начало работы

Руководства по проектам содержат обширную документацию по установке и расширению приложения.

• Начало работы
• Руководство пользователя
• Руководство администратора
• Руководство разработчика

Разработка

NiFi использует Maven Wrapper для разработки проекта. Maven Wrapper предоставляет сценарии оболочки, которые загружают и кэшируют выбранную версию Apache Maven для выполнения команд сборки.

Разработка в Microsoft Windows требует использования mvnw.cmd вместо mvnw для запуска команд Maven.

Сборка

Выполните следующую команду для сборки модулей проекта с параллельным выполнением:

./mvnw install -T1C

Выполните следующую команду для сборки модулей проекта с параллельным выполнением и статическим анализом для подтверждения соответствия требованиям к коду и лицензированию:

./mvnw install -T1C -P contrib-check

Выполните следующую команду для сборки двоичных файлов приложения без сборки других опциональных модулей:

./mvnw install -T1C -am -pl :nifi-assembly

Двоичные файлы

Модуль nifi-assembly содержит дистрибутив двоичных файлов.

ls nifi-assembly/target/nifi-*-bin.zip

Модуль nifi-assembly включает дистрибутив двоичных файлов в каталоге для локальной разработки и тестирования.

cd nifi-assembly/target/nifi-*-bin/nifi-*/

Запуск

NiFi предоставляет сценарии оболочки для запуска и остановки системы.

Запуск в Microsoft Windows требует использования nifi.cmd вместо nifi.sh для системных команд.

Запуск