Apache Dolphinscheduler

Sobre

O Apache DolphinScheduler é uma plataforma moderna de orquestração de dados que possibilita o desenvolvimento ágil e de baixo código de fluxos de trabalho de alto desempenho. É dedicado ao tratamento de dependências complexas de tarefas em pipelines de dados, e oferece uma ampla gama de tipos de tarefas integrados prontos para uso

As principais características do DolphinScheduler são:

• Fácil de implantar, oferece quatro modos de implantação incluindo Standalone, Cluster, Docker e Kubernetes.
• Fácil de usar, os fluxos de trabalho podem ser criados e gerenciados via interface web, Python SDK ou API aberta
• Altamente confiável e de alta disponibilidade, com uma arquitetura descentralizada, multi-master e multi-worker e suporte nativo para escalonamento horizontal.
• Alto desempenho, seu desempenho é várias vezes mais rápido do que outras plataformas de orquestração, e é capaz de lidar com dezenas de milhões de tarefas por dia
• Nativo em nuvem, o DolphinScheduler suporta a orquestração de fluxos de trabalho em múltiplas nuvens e data centers, e permite tipos de tarefas personalizados
• Versionamento de fluxos de trabalho, fornece controle de versão tanto para fluxos de trabalho quanto para instâncias individuais de fluxo de trabalho, incluindo tarefas.
• Controle flexível de estado de fluxos de trabalho e tarefas, suporta pausar/parar/recuperar a qualquer momento
• Suporte a múltiplos inquilinos
• Recursos adicionais, suporte a backfill (nativo na interface web), controle de permissões incluindo projeto e fonte de dados, etc.

Início Rápido

• Para uma experiência rápida
  • Quer começar com standalone
  • Quer começar com Docker
• Para Kubernetes
  • Começar com Kubernetes
• Para Terraform
  • Começar com Terraform

Capturas de Tela da Interface do Usuário

• Página inicial: Visão geral do projeto e fluxo de trabalho, incluindo as estatísticas mais recentes do estado das instâncias de fluxo de trabalho e tarefas.

• Definição de fluxo de trabalho: Crie e gerencie fluxos de trabalho por arrastar e soltar, fácil de construir e manter fluxos de trabalho complexos, suporta uma ampla gama de tarefas prontas para uso.

• Visualização em árvore do fluxo de trabalho: A estrutura de árvore abstrata pode fornecer uma compreensão mais clara das relações entre tarefas

• Fonte de dados: Suporta múltiplas fontes de dados externas, fornece capacidades unificadas de acesso a dados para MySQL, PostgreSQL, Hive, Trino, etc.

• Monitor: Veja o estado do master, worker e banco de dados em tempo real, incluindo uso de recursos do servidor e carga, faça uma verificação rápida de saúde sem precisar fazer login no servidor.

Sugestões e Relatórios de Bugs

Siga este guia para reportar suas sugestões ou bugs.

Contribuindo

A comunidade aceita contribuições de todos. Consulte esta página para obter mais detalhes: Como contribuir. Confira as boas primeiras issues aqui se você é novo no DolphinScheduler.

Comunidade

Junte-se à comunidade Apache DolphinScheduler:

• Participe do Slack do DolphinScheduler para manter contato com a comunidade
• Siga o Twitter do DolphinScheduler e fique por dentro das últimas notícias
• Inscreva-se na lista de e-mails do DolphinScheduler, [email protected] para usuários e [email protected] para desenvolvedores

Paisagens

  

O DolphinScheduler enriquece o CNCF CLOUD NATIVE Landscape.