Apache NiFi

Status

Recursos

Contatos

Comunidade

Funcionalidades

Apache NiFi é um sistema fácil de usar, poderoso e confiável para processar e distribuir dados.

O NiFi automatiza pipelines e distribuição de dados em cibersegurança, observabilidade, streams de eventos e IA generativa para milhares de empresas em todo o mundo, em todos os setores.

• Interface de Usuário via Navegador
  • Experiência contínua para design, controle e monitoramento
  • Gerenciamento de runtime e pipelines versionados
  • Seguro por padrão com HTTPS
• Processamento Escalável
  • Priorização configurável para throughput e latência
  • Entrega garantida com estratégias de retry e backoff
  • Escalabilidade horizontal com clustering
• Rastreamento de Proveniência
  • Histórico pesquisável com atributos configuráveis
  • Linhagem de dados em grafo da origem ao destino
  • Metadados e conteúdo para cada decisão de processamento
• Design Extensível
  • Interface de plugin para Processadores e Serviços de Controle
  • Suporte para Processadores em Python nativo
  • API REST para orquestração e monitoramento
• Configuração Segura
  • Single sign-on com OpenID Connect ou SAML 2
  • Políticas de autorização flexíveis para acesso baseado em papéis
  • Comunicação criptografada com TLS e SFTP

Requisitos

O NiFi suporta sistemas operacionais modernos e requer versões recentes de linguagens para desenvolvimento e execução da aplicação.

Requisitos de Plataforma

• Java 21

Dependências Opcionais

• Python 3.10 ou superior

Projetos

O repositório fonte inclui vários projetos componentes.

Consulte a documentação individual de cada projeto para detalhes adicionais.

• Apache NiFi
• Apache NiFi Registry
• Apache NiFi MiNiFi

Primeiros Passos

Guias do projeto fornecem documentação extensa para instalar e estender a aplicação.

• Primeiros Passos
• Guia do Usuário
• Guia do Administrador
• Guia do Desenvolvedor

Desenvolvimento

O NiFi usa o Maven Wrapper para desenvolvimento de projeto. O Maven Wrapper fornece scripts de shell que baixam e armazenam em cache uma versão selecionada do Apache Maven para executar comandos de build.

Desenvolver no Microsoft Windows requer usar mvnw.cmd em vez de mvnw para executar comandos Maven.

Compilação

Execute o seguinte comando para compilar os módulos do projeto usando execução paralela:

./mvnw install -T1C

Execute o seguinte comando para compilar os módulos do projeto usando execução paralela com análise estática para confirmar conformidade com requisitos de código e licenciamento:

./mvnw install -T1C -P contrib-check

Execute o seguinte comando para compilar os binários da aplicação sem compilar outros módulos opcionais:

./mvnw install -T1C -am -pl :nifi-assembly

Binários

O módulo nifi-assembly contém a distribuição binária.

ls nifi-assembly/target/nifi-*-bin.zip

O módulo nifi-assembly inclui a distribuição binária em um diretório para desenvolvimento e teste local.

cd nifi-assembly/target/nifi-*-bin/nifi-*/

Execução

O NiFi fornece scripts de shell para iniciar e parar o sistema.

Executar no Microsoft Windows requer usar nifi.cmd em vez de nifi.sh para comandos do sistema.

Iniciando