Apache NiFi

Statut

Ressources

Contacts

Communauté

Fonctionnalités

Apache NiFi est un système facile à utiliser, puissant et fiable pour traiter et distribuer des données.

NiFi automatise la cybersécurité, l'observabilité, les flux d'événements et les pipelines de données d'IA générative ainsi que leur distribution pour des milliers d'entreprises dans le monde entier, tous secteurs confondus.

• Interface utilisateur navigateur
  • Expérience fluide pour la conception, le contrôle et la surveillance
  • Gestion de l'exécution et pipelines versionnés
  • Sécurisé par défaut avec HTTPS
• Traitement évolutif
  • Priorisation configurable pour le débit et la latence
  • Livraison garantie avec stratégies de nouvelle tentative et de retour
  • Passage à l'échelle horizontal avec le clustering
• Suivi de provenance
  • Historique consultable avec attributs configurables
  • Lignage graphique des données de la source à la destination
  • Métadonnées et contenu pour chaque décision de traitement
• Conception extensible
  • Interface de plugin pour les processeurs et les services contrôleurs
  • Prise en charge des processeurs en Python natif
  • API REST pour l'orchestration et la surveillance
• Configuration sécurisée
  • Authentification unique avec OpenID Connect ou SAML 2
  • Politiques d'autorisation flexibles pour un accès basé sur les rôles
  • Communication chiffrée avec TLS et SFTP

Prérequis

NiFi prend en charge les systèmes d'exploitation modernes et nécessite des versions récentes des langages pour développer et exécuter l'application.

Prérequis de plateforme

• Java 21

Dépendances optionnelles

• Python 3.10 ou version ultérieure

Projets

Le dépôt source comprend plusieurs projets composants.

Veuillez consulter la documentation de chaque projet pour plus de détails.

• Apache NiFi
• Apache NiFi Registry
• Apache NiFi MiNiFi

Pour commencer

Les guides de projet fournissent une documentation complète pour l'installation et l'extension de l'application.

• Pour commencer
• Guide utilisateur
• Guide d'administration
• Guide développeur

Développement

NiFi utilise le Maven Wrapper pour le développement du projet. Le Maven Wrapper fournit des scripts shell qui téléchargent et mettent en cache une version sélectionnée de Apache Maven pour exécuter les commandes de construction.

Le développement sur Microsoft Windows nécessite d'utiliser mvnw.cmd au lieu de mvnw pour exécuter les commandes Maven.

Construction

Exécutez la commande suivante pour construire les modules du projet en exécution parallèle :

./mvnw install -T1C

Exécutez la commande suivante pour construire les modules du projet en exécution parallèle avec une analyse statique pour confirmer la conformité aux exigences de code et de licence :

./mvnw install -T1C -P contrib-check

Exécutez la commande suivante pour construire les binaires de l'application sans construire les autres modules optionnels :

./mvnw install -T1C -am -pl :nifi-assembly

Binaires

Le module nifi-assembly contient la distribution binaire.

ls nifi-assembly/target/nifi-*-bin.zip

Le module nifi-assembly inclut la distribution binaire dans un répertoire pour le développement et les tests locaux.

cd nifi-assembly/target/nifi-*-bin/nifi-*/

Exécution