Desenvolvimento de ETL
Nossa equipe busca um profissional apaixonado por tecnologia e transformação para criar pipelines de dados em AWS Glue com PySpark.
* Elaborar projetos ETL para a integração entre camadas utilizando PySpark;
* Implantar camadas Bronze, Prata e Ouro no Amazon S3;
* Configurar Glue Crawlers e Data Catalog para as camadas Prata e Ouro;
* Orquestrar processos com Step Functions e EventBridge;
* Criar consultas analíticas otimizadas com Amazon Athena;
* Avaliar o desempenho de testes e validações de formatos de dados para integração com aplicações;
* Automatizar infraestrutura e deploy utilizando GitHub e Terraform;