Apache Dolphinscheduler

Sobre

O Apache DolphinScheduler é uma plataforma moderna de orquestração de dados que capacita o desenvolvimento ágil e de baixo código de fluxos de trabalho de alto desempenho. É dedicado a lidar com dependências complexas de tarefas em pipelines de dados e fornece uma ampla gama de tipos de tarefas integrados prontos para uso.

As principais características do DolphinScheduler são:

• Fácil de implantar, oferece quatro modos de implantação: Standalone, Cluster, Docker e Kubernetes.
• Fácil de usar, fluxos de trabalho podem ser criados e gerenciados via interface web, Python SDK ou API aberta
• Alta confiabilidade e alta disponibilidade, com arquitetura descentralizada, multi-mestre e multi-trabalhador e suporte nativo para escalonamento horizontal.
• Alto desempenho, seu desempenho é várias vezes mais rápido que outras plataformas de orquestração, e é capaz de lidar com dezenas de milhões de tarefas por dia
• Nativo em Nuvem, o DolphinScheduler suporta orquestração de fluxos de trabalho em múltiplas nuvens e centros de dados, e permite tipos de tarefas personalizados
• Versionamento de Fluxos de Trabalho, fornece controle de versão para fluxos de trabalho e instâncias individuais de fluxo de trabalho, incluindo tarefas.
• Controle flexível de estado de fluxos de trabalho e tarefas, suporta pausar/parar/recuperá-los a qualquer momento
• Suporte a múltiplos inquilinos
• Recursos adicionais, suporte a backfill (nativo na interface web), controle de permissões incluindo projeto e fonte de dados, etc.

Início Rápido

• Para experiência rápida
  • Quer começar com standalone
  • Quer começar com Docker
• Para Kubernetes
  • Começar com Kubernetes
• Para Terraform
  • Começar com Terraform

Capturas de Tela da Interface do Usuário

• Página Inicial: Visão geral do projeto e fluxos de trabalho, incluindo as últimas estatísticas de status de instâncias de fluxo de trabalho e tarefas.

• Definição de Fluxo de Trabalho: Crie e gerencie fluxos de trabalho arrastando e soltando, fácil de construir e manter fluxos de trabalho complexos, suporta uma ampla gama de tarefas prontas para uso.

• Visualização em Árvore do Fluxo de Trabalho: Estrutura de árvore abstrata pode fornecer uma compreensão mais clara das relações entre as tarefas.

• Fonte de Dados: Suporta múltiplas fontes de dados externas, fornece recursos unificados de acesso a dados para MySQL, PostgreSQL, Hive, Trino, etc.

• Monitor: Visualize o status do mestre, trabalhador e banco de dados em tempo real, incluindo uso e carga de recursos do servidor, faça verificações rápidas de saúde sem fazer login no servidor.

Sugestões e Relatórios de Bugs

Siga este guia para relatar suas sugestões ou bugs.

Contribuindo

A comunidade recebe contribuições de todos. Consulte esta página para mais detalhes: Como contribuir. Confira boas primeiras issues aqui se você é novo no DolphinScheduler.

Comunidade

Junte-se à comunidade Apache DolphinScheduler:

• Junte-se ao Slack do DolphinScheduler para manter contato com a comunidade
• Siga o Twitter do DolphinScheduler e fique por dentro das últimas notícias
• Inscreva-se na lista de e-mails do DolphinScheduler, [email protected] para usuários e [email protected] para desenvolvedores

Panorama

  

O DolphinScheduler enriquece o CNCF CLOUD NATIVE Landscape.