Procuramos um profissional apoiado para desenvolver soluções inovadoras em análise de dados.
Descrição da vaga
Se você é apaixonado por tecnologia e busca desafios, nos podemos encontrar. Aqui, você terá oportunidades reais de crescimento profissional e pessoal ao trabalhar com projetos complexos que exigem a integração de diversos componentes.
Responsabilidades
* Desenvolver pipelines de dados escaláveis usando PySpark (focado em SQL)
* Implementar consultas SQL avançadas para dar suporte às necessidades de relatórios e lógica de negócios
* Compreender os requisitos e traduzir para código autônomo
* Transformar e integrar dados de diversas fontes em tabelas Iceberg e Snowflake
* Colaborar com analistas de negócios para entender as necessidades de dados
* Monitorar e gerenciar trabalhos de dados em execução no AWS EMR orquestrados pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWS
* Garantar a qualidade, a consistência e o desempenho dos dados em todo o pipeline
Requisitos Técnicos e de Experiência
* Analisador de Dados PL qualificado com uma base sólida em desenvolvimento baseado em SQL
* Experiência na criação e manutenção de data marts
* Conhecimento sobre Airflow ou outras ferramentas de orquestração
* Familiaridade com ferramentas de infraestrutura como código, como o Terraform
* Compreensão dos padrões ODS (Operacional Data Store) e arquitetura de data lake
Benefícios
Trabalhar aqui é uma oportunidade única para crescer profissionalmente e contribuir para projetos desafiadores e importantes.