Offizielle Website von Dolphin Scheduler dolphinscheduler.apache.org

Design-Funktionen

DolphinScheduler ist eine verteilte und erweiterbare Workflow-Planungsplattform mit leistungsstarken visuellen DAG-Oberflächen, die sich der Lösung komplexer Jobabhängigkeiten in der Datenpipeline widmet und verschiedene Arten von Jobs out of the box bereitstellt.

Die Hauptziele sind wie folgt:

• Verknüpft die Aufgaben entsprechend ihren Abhängigkeiten in einem DAG-Diagramm, das den Ausführungsstatus der Aufgaben in Echtzeit visualisieren kann.
• Unterstützt verschiedene Aufgabentypen: Shell, MR, Spark, SQL (MySQL, PostgreSQL, hive, spark SQL), Python, Sub_Process, Procedure usw.
• Unterstützt die Planung von Workflows und Abhängigkeiten, manuelle Planung zum Anhalten/Stoppen/Wiederherstellen von Aufgaben, Wiederholung/Alarm bei fehlgeschlagenen Aufgaben, Wiederherstellung bestimmter Knoten nach einem Fehler, Abbrechen von Aufgaben usw.
• Unterstützt die Priorität von Workflows und Aufgaben, Task-Failover sowie Zeitüberschreitungs-Alarm oder -Fehler bei Aufgaben.
• Unterstützt globale Workflow-Parameter und benutzerdefinierte Parametereinstellungen für Knoten.
• Unterstützt das Online-Hochladen/-Herunterladen/-Verwalten von Ressourcendateien usw. Unterstützt das Online-Erstellen und -Bearbeiten von Dateien.
• Unterstützt die Online-Anzeige, das Scrollen und das Herunterladen von Aufgabenprotokollen usw.
• Implementiert Cluster-HA; dezentralisiert Master- und Worker-Cluster über Zookeeper.
• Unterstützt die Anzeige von Metriken zur CPU-Last, zum Speicher und zur CPU-Auslastung von Master/Worker.
• Unterstützt die Anzeige des Workflow-Verlaufs als Baum-/Gantt-Diagramm sowie die statistische Analyse des Aufgabenstatus und des Prozessstatus in jedem Workflow.
• Unterstützt das Backfilling von Daten.
• Unterstützt Multi-Tenancy.
• Unterstützt Internationalisierung.
• Weitere Funktionen warten darauf, von Partnern erkundet zu werden ...

Was DolphinScheduler bietet

Screenshots der Benutzeroberfläche

Schnellstart in Docker

Bitte lesen Sie das Dokument auf der offiziellen Website: Schnellstart in Docker

Schnellstart in Kubernetes

Bitte lesen Sie das Dokument auf der offiziellen Website: Schnellstart in Kubernetes

So bauen Sie das Projekt

./mvnw clean install -Prelease

Artefakt:

dolphinscheduler-dist/target/apache-dolphinscheduler-${latest.release.version}-bin.tar.gz: Binary package of DolphinScheduler
dolphinscheduler-dist/target/apache-dolphinscheduler-${latest.release.version}-src.tar.gz: Source code package of DolphinScheduler

Danksagung

DolphinScheduler basiert auf vielen exzellenten Open-Source-Projekten wie Google Guava, Guice, gRPC, Netty, Quartz und vielen Open-Source-Projekten von Apache usw. Wir möchten allen Open-Source-Projekten, die in Dolphin Scheduler verwendet werden, unseren tiefen Dank aussprechen. Wir hoffen, dass wir nicht nur Nutznießer von Open Source sind, sondern auch etwas an die Community zurückgeben. Darüber hinaus hoffen wir, dass alle, die dieselbe Begeisterung und Leidenschaft für Open Source haben, sich beteiligen und einen Beitrag zur Open-Source-Community leisten!

Hilfe erhalten

1. Reichen Sie ein Issue ein.
2. Abonnieren Sie diese Mailingliste: https://dolphinscheduler.apache.org/en-us/community/development/subscribe.html, und senden Sie dann eine E-Mail an [email protected]

Community

Sie sind herzlich eingeladen, mit den Entwicklern und Benutzern von Dolphin Scheduler zu kommunizieren. Es gibt zwei Möglichkeiten, sie zu finden:

1. Treten Sie dem Slack-Kanal über diesen Einladungslink bei.
2. Folgen Sie dem Twitter-Konto von DolphinScheduler und erhalten Sie die neuesten Nachrichten rechtzeitig.

Mitwirkende im Zeitverlauf

So können Sie beitragen

Die Community begrüßt alle, die einen Beitrag leisten möchten. Weitere Informationen finden Sie auf dieser Seite: So können Sie beitragen.

Lizenz

Bitte beachten Sie die Datei LICENSE.