Apache NiFi

Status

Ressourcen

Kontakte

Community

Funktionen

Apache NiFi ist ein benutzerfreundliches, leistungsstarkes und zuverlässiges System zur Verarbeitung und Verteilung von Daten.

NiFi automatisiert Cybersecurity, Observability, Ereignisströme und generative KI-Datenpipelines und -verteilung für tausende Unternehmen weltweit aus allen Branchen.

• Browser-Benutzeroberfläche
  • Nahtlose Erfahrung für Design, Steuerung und Überwachung
  • Laufzeitverwaltung und versionierte Pipelines
  • Standardmäßig sicher mit HTTPS
• Skalierbare Verarbeitung
  • Konfigurierbare Priorisierung für Durchsatz und Latenz
  • Garantierte Zustellung mit Wiederholungs- und Backoff-Strategien
  • Horizontale Skalierung durch Clustering
• Provenance Tracking
  • Durchsuchbarer Verlauf mit konfigurierbaren Attributen
  • Graphdaten-Abstammung von Quelle zu Ziel
  • Metadaten und Inhalt für jede Verarbeitungsentscheidung
• Erweiterbares Design
  • Plugin-Schnittstelle für Prozessoren und Controller Services
  • Unterstützung für Prozessoren in nativem Python
  • REST-API zur Orchestrierung und Überwachung
• Sichere Konfiguration
  • Single Sign-on mit OpenID Connect oder SAML 2
  • Flexible Autorisierungsrichtlinien für rollenbasierte Zugriffsrechte
  • Verschlüsselte Kommunikation mit TLS und SFTP

Anforderungen

NiFi unterstützt moderne Betriebssysteme und erfordert aktuelle Sprachversionen zur Entwicklung und Ausführung der Anwendung.

Plattformanforderungen

• Java 21

Optionale Abhängigkeiten

• Python 3.10 oder höher

Projekte

Das Quellrepository enthält mehrere Komponentenprojekte.

Bitte beachten Sie die jeweilige Projektdokumentation für weitere Details.

• Apache NiFi
• Apache NiFi Registry
• Apache NiFi MiNiFi

Erste Schritte

Projektleitfäden bieten umfangreiche Dokumentation zur Installation und Erweiterung der Anwendung.

• Erste Schritte
• Benutzerhandbuch
• Administratorhandbuch
• Entwicklerhandbuch

Entwicklung

NiFi verwendet den Maven Wrapper für die Projektentwicklung. Der Maven Wrapper stellt Shell-Skripte bereit, die eine ausgewählte Version von Apache Maven herunterladen und zwischenspeichern, um Build-Befehle auszuführen.

Bei der Entwicklung unter Microsoft Windows muss mvnw.cmd anstelle von mvnw verwendet werden, um Maven-Befehle auszuführen.

Bauen

Führen Sie den folgenden Befehl aus, um Projektmodule mit paralleler Ausführung zu bauen:

./mvnw install -T1C

Führen Sie den folgenden Befehl aus, um Projektmodule mit paralleler Ausführung und statischer Analyse zu bauen, um die Einhaltung der Code- und Lizenzanforderungen zu bestätigen:

./mvnw install -T1C -P contrib-check

Führen Sie den folgenden Befehl aus, um die Anwendungsbinärdateien ohne andere optionale Module zu bauen:

./mvnw install -T1C -am -pl :nifi-assembly

Binärdateien

Das Modul nifi-assembly enthält die Binärverteilung.

ls nifi-assembly/target/nifi-*-bin.zip

Das Modul nifi-assembly enthält die Binärverteilung in einem Verzeichnis für lokale Entwicklung und Tests.

cd nifi-assembly/target/nifi-*-bin/nifi-*/

Ausführen

NiFi bietet Shell-Skripte zum Starten und Stoppen des Systems.

Bei der Ausführung unter Microsoft Windows muss nifi.cmd anstelle von nifi.sh für Systembefehle verwendet werden.