Descrição do Cargo
O especialista em análise de dados é responsável por desenvolver e manter pipelines de dados em lote utilizando o PySpark, com foco em SQL. O candidato deve ter experiência em criar consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatórios.
Habilidades e Qualificações
* Desenvolver e manter pipelines de dados em lote usando o PySpark;
* Escribir e otimizar consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatórios;
* Entender os requisitos de forma autônoma e traduzir para código;
* Transformar e integrar dados de diversas fontes em tabelas Iceberg e Snowflake;
* Contribuir para o desenvolvimento de data marts e conjuntos de dados selecionados para consumo comercial;
* Colaborar com analistas de negócios para entender as necessidades de dados;
* Monitore e gerencie trabalhos de dados em execução no AWS EMR orquestrado pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWS.
Vantagens
Como especialista em análise de dados, você terá a oportunidade de trabalhar em projetos desafiadores e contribuir para a melhoria contínua dos processos de análise de dados da empresa.
Mais Informações
Se você é um profissional motivado e está procurando por uma oportunidade de crescimento e desenvolvimento em uma área emocionante, este é o cargo certo para você!