Apache NiFi

Status

Ressourcen

Kontakte

Community

Funktionen

Apache NiFi ist ein einfach zu bedienendes, leistungsstarkes und zuverlässiges System zur Verarbeitung und Verteilung von Daten.

NiFi automatisiert Cybersecurity, Observability, Event-Streams sowie Datenpipelines und -verteilung für generative KI bei tausenden Unternehmen weltweit in allen Branchen.

• Browser-Benutzeroberfläche
  • Nahtloses Erlebnis für Design, Steuerung und Überwachung
  • Laufzeitverwaltung und versionierte Pipelines
  • Standardmäßig sicher durch HTTPS
• Skalierbare Verarbeitung
  • Konfigurierbare Priorisierung für Durchsatz und Latenz
  • Garantierte Zustellung mit Wiederholungs- und Backoff-Strategien
  • Horizontale Skalierung durch Clustering
• Provenance-Verfolgung
  • Durchsuchbarer Verlauf mit konfigurierbaren Attributen
  • Datenherkunft als Graph von Quelle zu Ziel
  • Metadaten und Inhalt für jede Verarbeitungsentscheidung
• Erweiterbares Design
  • Plugin-Schnittstelle für Prozessoren und Controller-Services
  • Unterstützung für Prozessoren in nativem Python
  • REST-API für Orchestrierung und Überwachung
• Sichere Konfiguration
  • Single Sign-on mit OpenID Connect oder SAML 2
  • Flexible Autorisierungsrichtlinien für rollenbasierte Zugriffskontrolle
  • Verschlüsselte Kommunikation mit TLS und SFTP

Anforderungen

NiFi unterstützt moderne Betriebssysteme und erfordert aktuelle Sprachversionen für die Entwicklung und den Betrieb der Anwendung.

Plattformanforderungen

• Java 21

Optionale Abhängigkeiten

• Python 3.10 oder höher

Projekte

Das Quellverzeichnis enthält mehrere Komponentenprojekte.

Weitere Einzelheiten finden Sie in der jeweiligen Projektdokumentation.

• Apache NiFi
• Apache NiFi Registry
• Apache NiFi MiNiFi

Erste Schritte

Projektleitfäden bieten ausführliche Dokumentation zur Installation und Erweiterung der Anwendung.

• Erste Schritte
• Benutzerhandbuch
• Administratorhandbuch
• Entwicklerhandbuch

Entwicklung

NiFi verwendet den Maven Wrapper für die Projektentwicklung. Der Maven Wrapper stellt Shell-Skripte bereit, die eine ausgewählte Version von Apache Maven herunterladen und zwischenspeichern, um Build-Befehle auszuführen.

Für die Entwicklung unter Microsoft Windows muss zum Ausführen von Maven-Befehlen mvnw.cmd anstelle von mvnw verwendet werden.

Erstellen

Führen Sie den folgenden Befehl aus, um Projektmodule mit paralleler Ausführung zu erstellen:

./mvnw install -T1C

Führen Sie den folgenden Befehl aus, um Projektmodule mit paralleler Ausführung und statischer Analyse zu erstellen, um die Einhaltung der Code- und Lizenzanforderungen zu bestätigen:

./mvnw install -T1C -P contrib-check

Führen Sie den folgenden Befehl aus, um die Anwendungsbinärdateien zu erstellen, ohne andere optionale Module zu bauen:

./mvnw install -T1C -am -pl :nifi-assembly

Binärdateien

Das Modul nifi-assembly enthält die Binärdistribution.

ls nifi-assembly/target/nifi-*-bin.zip

Das Modul nifi-assembly enthält die Binärdistribution in einem Verzeichnis für lokale Entwicklung und Tests.

cd nifi-assembly/target/nifi-*-bin/nifi-*/

Ausführen

NiFi stellt Shell-Skripte zum Starten und Stoppen des Systems bereit.