Apache Dolphinscheduler

Sobre

Apache DolphinScheduler é a moderna plataforma de orquestração de dados. Ágil para criar fluxos de trabalho de alto desempenho com baixo código. Também fornece uma interface de usuário poderosa, dedicada a resolver dependências complexas de tarefas no pipeline de dados e fornecer vários tipos de jobs disponíveis prontos para uso.

As principais características do DolphinScheduler são as seguintes:

• Fácil de implantar, oferece quatro formas de implantação, incluindo Standalone, Cluster, Docker e Kubernetes.
• Fácil de usar, o fluxo de trabalho pode ser criado e gerenciado de quatro maneiras, incluindo Web UI, Python SDK, arquivo Yaml e Open API
• Altamente confiável e de alta disponibilidade, arquitetura descentralizada com multi-master e multi-worker, suporte nativo para escalonamento horizontal.
• Alto desempenho, seu desempenho é N vezes mais rápido que outras plataformas de orquestração e pode suportar dezenas de milhões de tarefas por dia.
• Cloud Native, o DolphinScheduler suporta orquestração de fluxos de trabalho multi-nuvem/data center e suporta tipo de tarefa personalizado.
• Versionamento tanto do fluxo de trabalho quanto da instância do fluxo de trabalho (incluindo tarefas).
• Controle de estado variado do fluxo de trabalho e tarefa, suporte para pausar/parar/recuperá-los a qualquer momento.
• Suporte a multi-inquilinos.
• Outros como suporte a backfill (nativo na Web UI), controle de permissão incluindo projeto, recurso e fonte de dados.

Início Rápido

• Para uma experiência rápida
  • Deseja começar com standalone
  • Deseja começar com Docker
• Para Kubernetes
  • Começar com Kubernetes
• Para Terraform
  • Começar com Terraform

Capturas de Tela da Interface do Usuário

• Página Inicial: Visão geral do projeto e do fluxo de trabalho, incluindo as estatísticas mais recentes de instância do fluxo de trabalho e instância de tarefa.

• Definição do Fluxo de Trabalho: Crie e gerencie fluxos de trabalho por arrastar e soltar, fácil de construir e manter fluxos de trabalho complexos, suporte a várias tarefas prontas para uso.

• Visualização em Árvore do Fluxo de Trabalho: Estrutura de árvore abstrata pode proporcionar uma compreensão mais clara da relação entre as tarefas.

• Fonte de Dados: Gerencie suporte a múltiplas fontes de dados externas, forneça capacidades unificadas de acesso a dados, como MySQL, PostgreSQL, Hive, Trino, etc.

• Monitor: Visualize o status do master, worker e banco de dados em tempo real, incluindo uso de recursos do servidor e carga, faça uma verificação rápida de saúde sem fazer login no servidor.

Sugestões e Relatórios de Bugs

Siga este guia para relatar suas sugestões ou bugs.

Contribuindo

A comunidade acolhe a todos para contribuir, por favor, consulte esta página para saber mais: Como contribuir, encontre a primeira boa issue aqui se você é novo no DolphinScheduler.

Comunidade

Bem-vindo a se juntar à comunidade Apache DolphinScheduler por:

• Junte-se ao Slack do DolphinScheduler para manter contato com a comunidade
• Siga o Twitter do DolphinScheduler e fique por dentro das últimas novidades
• Inscreva-se na lista de e-mails do DolphinScheduler, [email protected] para usuários e [email protected] para desenvolvedores

Paisagens

  

O DolphinScheduler enriquece a Paisagem Cloud Native do CNCF.