Objetivo do Cargo
O cargo de Engenheiro de Dados Sênior visa transformar o varejo da construção civil com tecnologia, inteligência e propósito.
* Desenvolvimento de Pipelines Escaláveis:
o Criar e manter processos de ingestão de dados altamente eficientes (Batch, Streaming, CDC) para grandes volumes, garantindo a integridade, conformidade e resiliência dos dados;
* Modelagem e Otimização:
o Projetar, implementar e otimizar estruturas de dados no Data Lake/Lakehouse, orientadas à governança e que atendam às necessidades estratégicas dos times de Analytics e Negócios;
* Qualidade e Governança:
o Desenvolver e manter processos de tratamento, aplicando frameworks avançados de validação (como DQX) e garantindo a qualidade e acessibilidade dos dados;
* Monitoramento e Suporte:
o Implementar ferramentas e práticas de monitoramento contínuo para garantir a disponibilidade, desempenho e conformidade do Data Lake, atuando de forma proativa na resolução de problemas;
* Liderança Técnica em Governança:
o Liderar a implantação e utilização do Catálogo Unity no Databricks para documentar e organizar ativos, assegurando o cumprimento das políticas de governança de dados;
Requisitos:
* Arquitetura de Dados: conhecimento profundo e experiência prática na aplicação de Data Lake, Data Warehouse e Lakehouse;
* Linguagens e Frameworks: proficiência em Python (scripts, automações, ETL/ELT, PySpark, Pandas) e SQL avançado (tuning de queries, modelagem, window functions);
* Nuvem Azure: experiência avançada com o ecossistema Azure, incluindo Data Factory, Databricks e Data Lake;
* Engenharia Essencial: sólida experiência em arquiteturas distribuídas e padrões de ingestão de dados (Batch, Streaming, CDC);
* Governança de Dados e DataOps: experiência em catalogação, linhagem, qualidade e aplicação dos princípios de DataOps e DMBoK;
* DevOps/MLOps: experiência na criação e manutenção de pipelines CI/CD com ferramentas como Github;
* Segurança da Informação: conhecimento e aplicação da camada de segurança (criptografia, LGPD e mascaramento de dados);
Habilidades Comportamentais:
* Comunicação Eficaz, Empatia e Colaboração (Interação com Equipes);
* Senso de Urgência e Proatividade no contexto técnico;
* Capacidade de Resolução de Problemas complexos, através de visão analítica e raciocínio lógico;
* Flexibilidade e Resiliência em cenários de alta complexidade;
* Paciência pela Qualidade e Visão Holística do negócio;