Apache Dolphinscheduler

概要

Apache DolphinScheduler は、モダンなデータオーケストレーションプラットフォームです。ローコードで高性能なワークフローを素早く作成できます。また、強力なユーザーインターフェースを備え、データパイプラインの複雑なタスク依存関係を解決し、さまざまな種類のジョブをすぐに使える状態で提供することに特化しています。

DolphinScheduler の主な機能は次のとおりです:

デプロイが簡単で、Standalone、Cluster、Docker、Kubernetes の4つのデプロイ方法を提供します。
使いやすく、Web UI、Python SDK、YAML ファイル、Open API の4つの方法でワークフローを作成・管理できます。
信頼性と高可用性に優れ、マルチマスター・マルチワーカーの分散アーキテクチャで、水平スケーリングをネイティブにサポートします。
高性能で、他のオーケストレーションプラットフォームよりも N 倍高速で、1日あたり数千万のタスクをサポートできます。
クラウドネイティブで、マルチクラウド/データセンターのワークフローオーケストレーションをサポートし、カスタムタスクタイプもサポートします。
ワークフローとワークフローインスタンス(タスクを含む)の両方のバージョニング。
ワークフローとタスクの多彩な状態制御。いつでも一時停止・停止・復旧をサポートします。
マルチテナンシーのサポート。
その他、バックフィルサポート(Web UI ネイティブ)、プロジェクト・リソース・データソースを含む権限制御。

クイックスタート

クイック体験の場合
- スタンドアロンで開始する
- Docker で開始する
Kubernetes の場合
- Kubernetes で開始する
Terraform の場合
- Terraform で開始する

ユーザーインターフェースのスクリーンショット

ホームページ: プロジェクトとワークフローの概要。最新のワークフローインスタンスとタスクインスタンスの状態統計を含みます。
ワークフロー定義: ドラッグ＆ドロップでワークフローを作成・管理でき、複雑なワークフローの構築と保守が簡単です。標準で多数のタスクをサポートしています。
ワークフローツリービュー: 抽象的なツリー構造により、タスク間の関係をより明確に理解できます。
データソース: 複数の外部データソースの管理をサポートし、MySQL、PostgreSQL、Hive、Trino などのための統一されたデータアクセス機能を提供します。
モニター: マスター、ワーカー、データベースの状態をリアルタイムで表示します。サーバーのリソース使用状況や負荷を含み、サーバーにログインすることなく迅速なヘルスチェックができます。

提案とバグ報告

提案やバグを報告するには、このガイドに従ってください。

コントリビューション

コミュニティはどなたでもコントリビュートを歓迎しています。詳細はコントリビュート方法のページをご覧ください。DolphinScheduler を初めてご利用の方は、こちらで good first issue を探してください。

コミュニティ

以下の方法で Apache DolphinScheduler コミュニティに参加できます:

DolphinScheduler Slack に参加して、コミュニティと連絡を取り合いましょう。
DolphinScheduler Twitter をフォローして、最新ニュースを入手しましょう。
DolphinScheduler のメーリングリストを購読しましょう。ユーザー向けは [email protected]、開発者向けは [email protected] です。

ランドスケープ

DolphinScheduler は CNCF CLOUD NATIVE Landscape. を充実させます。

apache__dolphinscheduler_CVE-2023-51770_3_2_1_fixed

人気