What you will learn

• Determinar se os pipelines de dados em lote são a escolha correta para seu caso de uso comercial.

• Projetar e criar pipelines de dados em lote escalonáveis para ingestões e transformações de alto volume.

• Implementar controles de qualidade nos pipelines em lote para garantir a integridade dos dados.

• Orquestrar, gerenciar e monitorar fluxos de trabalho de pipeline de dados em lote, implementando o tratamento de erros e a observabilidade.