Seja bem-vindo a este empolgante curso sobre o desenvolvimento utilizando o Apache NiFi em Português!
Neste curso, apresentaremos o Apache NiFi e sua arquitetura, além de preparar um ambiente para você desenvolver seus Workflows. Aprenderemos sobre o desenvolvimento de integrações de dados e fluxos sem codificação SQL. Além disso, teremos exercícios opcionais utilizando o NiFi em conjunto com componentes do Google Cloud (GCP).
Através deste curso, você aprenderá:
– Criar fluxos de carga de dados;
– Desenvolver processos de ingestão de dados;
– Realizar carga de dados através de arquivos;
– Fazer carga de dados entre bancos de dados distintos;
– Desenvolver processos de integração automatizados/programados;
– Adicionar parâmetros a um Parameter Context;
– Alterar o conteúdo e o nome de um arquivo;
– Entender a arquitetura do NiFi;
– Atribuir um Parameter Context a um Process Group;
– Seguir boas práticas de desenvolvimento;
– Adicionar um Controller Service no fluxo de dados;
– Adicionar um Controller Service para um Reporting Task;
– Adicionar um Reporting Task no fluxo de dados;
– Ativar ou desativar um Controller Service;
– Criar um conjunto de dados e uma tabela no BigQuery;
– Criar um template;
– Criar uma variável;
– Exportar e importar um template;
– Instanciar um template;
– Remover um template;
– Explorar os componentes do NiFi;
– Conhecer a ferramenta em detalhes;
– Utilizar o ConsumeGCPubSub;
– Trabalhar com Controller Services;
– Criar um cluster Dataproc;
– Criar uma conta de serviço e obter o arquivo de credenciais;
– Criar um orçamento no GCP;
– Criar regras de firewall;
– Criar tópicos e assinaturas no Pub/Sub do GCP;
– Criar um Parameter Context;
– Criar um Process Group;
– Utilizar Data Provenance;
– Utilizar DeleteGCSObject;
– Utilizar DeleteHDFS;
– Detalhar um evento de Provenance e realizar o reprocessamento de FlowFiles;
– Trabalhar com diretórios;
– Utilizar ExecuteProcess;
– Utilizar ExecuteSQL;
– Utilizar UpdateAttribute;
– Trabalhar com variáveis;
– Visualizar a Linhagem do FlowFile;
– E muito mais.
Prepare-se para mergulhar em uma jornada emocionante de aprendizado e desenvolvimento com o Apache NiFi. Estamos animados para começar essa aventura com você!
