Profissional Engenheiro de Dados AWS
Nós estamos procurando por alguém que tenha experiência em trabalhar com AWS Glue para desempenhar a função de engenheiro de dados.
Responsabilidades:
* Desenvolver processos ETL no AWS Glue, utilizando PySpark, para transformar e organizar os dados.
* Implementar camadas de armazenamento em Amazon S3.
* Configurar Glue Crawlers e Data Catalog para as camadas de armazenamento.
* Realizar a orquestração de processos com Step Functions e EventBridge.
* Configurar Kinesis Data Streams e Kinesis Firehose para ingestão de dados em tempo real.
* Criar e otimizar consultas analíticas com Amazon Athena.
* Executar testes de performance e validação de formatos de dados para integração com aplicações.
* Automatizar infraestrutura e deploy utilizando Github e Terraform.
Habilidades principais: AWS Glue, Pyspark, S3, Step Functions, EventBridge, Athena, Kinesis, Terraform, Github.
Benefícios:
* Plano de saúde; Plano odontológico; Seguro de vida; Vale refeição; Vale alimentação; Horário flexível; Home office; Gympass, Telemedicina, Telenutrição, Canal de suporte emocional 24h e muito mais.