Oportunidade de Carreira para Analista de Dados
Estamos procurando por profissionais talentosos para trabalhar com pipelines de dados em lote usando o PySpark e SQL.
Responsabilidades:
* Desenvolver e manter pipelines de dados em lote utilizando PySpark, focado em otimização de consultas SQL;
* Escrever e melhorar consultas complexas em SQL para atender às necessidades de relatórios e logicas de negócios;
* Entender requisitos e traduzir para código de forma autônoma;
* Transformar e integrar dados de diversas fontes em tabelas Iceberg e Snowflake;
* Colaborar com analistas de negócios para entender as necessidades de dados e contribuir para o desenvolvimento de data marts e conjuntos de dados selecionados;
* Monitore e gerencie trabalhos de dados em execução no AWS EMR ouquestrados pelo Airflow, aproveitando serviços da AWS como S3 e Glue;
Requisitos:
* Analista de Dados qualificado com conhecimento sólido em desenvolvimento baseado em SQL;
* Experiência na criação e manutenção de data marts;
* Familiaridade com ferramentas de orquestração como Airflow;
* Conhecimento de padrões ODS (Operacional Data Store) e arquitetura de data lake;
* Experiência com Bitbucket e Jenkins;