Apache Dolphinscheduler

À propos

Apache DolphinScheduler est la plateforme moderne d'orchestration de données. Agile pour créer des workflows à haute performance avec du low-code. Il fournit également une interface utilisateur puissante, dédiée à résoudre les dépendances complexes de tâches dans le pipeline de données et à fournir divers types de travaux disponibles prêts à l'emploi.

Les principales fonctionnalités de DolphinScheduler sont les suivantes :

• Facile à déployer, quatre modes de déploiement sont proposés : Standalone, Cluster, Docker et Kubernetes.
• Facile à utiliser, les workflows peuvent être créés et gérés de quatre manières : Web UI, Python SDK, fichier Yaml et Open API.
• Haute fiabilité et haute disponibilité, architecture décentralisée avec multi-master et multi-worker, support natif de la mise à l'échelle horizontale.
• Haute performance, ses performances sont N fois plus rapides que les autres plateformes d'orchestration et il peut supporter des dizaines de millions de tâches par jour.
• Cloud Native, DolphinScheduler prend en charge l'orchestration de workflows multi-cloud/centre de données, et prend en charge les types de tâches personnalisés.
• Versionnage à la fois du workflow et de l'instance de workflow (y compris les tâches).
• Contrôle d'état varié du workflow et de la tâche, prise en charge de la pause/arrêt/récupération à tout moment.
• Prise en charge multi-locataire.
• D'autres fonctionnalités comme la prise en charge du backfill (Web UI native), le contrôle des permissions incluant projet, ressource et source de données.

Démarrage rapide

• Pour une expérience rapide
  • Démarrer avec Standalone
  • Démarrer avec Docker
• Pour Kubernetes
  • Démarrer avec Kubernetes
• Pour Terraform
  • Démarrer avec Terraform

Captures d'écran de l'interface utilisateur

• Page d'accueil : Aperçu du projet et des workflows, y compris les statistiques d'état des instances de workflow et de tâches les plus récentes.

• Définition du workflow : Créez et gérez des workflows par glisser-déposer, facile à construire et maintenir des workflows complexes, prend en charge un grand nombre de tâches prêtes à l'emploi.

• Vue arborescente du workflow : Une structure arborescente abstraite permet de mieux comprendre les relations entre les tâches.

• Source de données : Gère le support de multiples sources de données externes, fournit des capacités d'accès aux données unifiées pour MySQL, PostgreSQL, Hive, Trino, etc.

• Moniteur : Visualisez l'état du master, du worker et de la base de données en temps réel, y compris l'utilisation des ressources du serveur et la charge, effectuez un contrôle rapide de l'état sans vous connecter au serveur.

Suggestions et signalements de bugs

Suivez ce guide pour signaler vos suggestions ou bugs.

Contribuer

La communauté accueille tout le monde pour contribuer, veuillez consulter cette page pour en savoir plus : Comment contribuer, trouvez la bonne première issue ici si vous êtes nouveau sur DolphinScheduler.

Communauté

Bienvenue pour rejoindre la communauté Apache DolphinScheduler en :

• Rejoignez le Slack DolphinScheduler pour rester en contact avec la communauté
• Suivez DolphinScheduler sur Twitter et obtenez les dernières nouvelles
• Abonnez-vous à la liste de diffusion DolphinScheduler, [email protected] pour les utilisateurs et [email protected] pour les développeurs

Landscapes

  

DolphinScheduler enrichit le CNCF CLOUD NATIVE Landscape.