A transformação dos dados é a chave para o sucesso em qualquer setor.
Nossa equipe valoriza a autonomia, colaboração e crescimento contínuo. Desenvolvemos soluções que conectam inovação, eficiência e progresso em setores essenciais.
Requisitos Técnicos e de Experiência:
* Analista de Dados PL qualificado com base sólida em desenvolvimento baseado em SQL;
* Experiência na criação e manutenção de pipelines de dados usando o PySpark;
* Conhecimento das estruturas de modelagem de dados e experiência no suporte a datawarehouses e data marts;
Para alcançar nossos objetivos, buscamos profissionais habilidosos em análise de dados e desenvolvimento de soluções inovadoras.
Descrição dos Requisitos Técnicos:
Pipeline de Dados
* Criar e manter pipelines de dados em lote usando o PySpark;
* Escrever e otimizar consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatórios;
* Entender os requisitos de forma autônoma e traduzir para código;
* Transformar e integrar dados de diversas fontes em tabelas Iceberg e Snowflake;
* Contribuir para o desenvolvimento de data marts e conjuntos de dados selecionados para consumo comercial;
* Colaborar com analistas de negócios para entender as necessidades de dados;
* Monitore e gerencie trabalhos de dados em execução no AWS EMR orquestrados pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWS;
Aqui estão alguns detalhes adicionais sobre os requisitos técnicos:
Ferramentas utilizadas: PySpark, SQL, Iceberg, Snowflake, AWS EMR, Airflow, S3, Glue.
Tecnologias envolvidas: Datawarehouse, datamart, pipeline de dados, consultas SQL, análise de dados.
Por fim, gostaríamos de ressaltar a importância de uma boa comunicação entre os times de desenvolvimento e análise de dados.