Descrição do Cargo
Desenvolvemos soluções inovadoras que conectam eficiência e progresso em setores essenciais, como administração pública, telecomunicações & mídia, energia & utilidades, indústria & consumo, saúde e finanças.
Aqui você encontra um ambiente dinâmico e estimulante, onde podemos criar soluções complexas para problemas reais. Nossa equipe trabalha com propósito, utilizando tecnologias emergentes para transformar realidades e gerar impacto positivo.
Responsabilidades
1. Desenvolver pipelines de dados em lote usando o PySpark (focado em SQL)
2. Escrever e otimizar consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatórios
3. Entender os requisitos de forma autônoma e traduzir para código
4. Transformar e integrar dados de diversas fontes em tabelas Iceberg e Snowflake
5. Contribuir para o desenvolvimento de data marts e conjuntos de dados selecionados para consumo comercial
6. Colaborar com analistas de negócios para entender as necessidades de dados
7. Monitore e gerencie trabalhos de dados em execução no AWS EMR orquestrados pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWS
Requisitos Técnicos e Experiência
Analista de Dados PL qualificado com base sólida em desenvolvimento baseado em SQL. Essa função se concentrará na criação e manutenção de pipelines de dados usando o PySpark, com SQL como a linguagem de codificação principal.
Qualificações Preferenciais
* Experiência na criação e gerenciamento de data marts
* Exposição ao Airflow ou outras ferramentas de orquestração
* Familiaridade com ferramentas de infraestrutura como código, como o Terraform
* Compreensão dos padrões ODS (Operational Data Store) e arquitetura de data lake
* Experiência com Bitbucket (ou qualquer ferramentas Git semelhantes)
* Experiência/compreensão de Jenkins
Benefícios
Nosso compromisso com a diversidade é um elemento-chave da nossa cultura: Igualdade de oportunidades, respeito pelas pessoas e não discriminação são princípios de atuação para todos os profissionais da empresa.
Integramos o Bloomberg Gender-Equality Index (GEI) 2021 em termos de diversidade e igualdade de gênero.