Desenvolver soluções de dados robustas e escaláveis é um desafio constante. Em nossa equipe, buscamos profissionais experientes em Python para liderar o desenvolvimento e implementação de sistemas de Master Data Management (MDM).
Especificações do Cargo
Buscamos um Engenheiro de Dados Sênior com sólida experiência em Python para trabalhar na modelagem de dados, especificação de regras de negócios e implementação dessas regras e tabelas no ambiente Databricks.
Responsabilidades
* Desenvolver e implementar a arquitetura de modelagem de dados do MDM;
* Especificar e documentar regras de negócios para unificação e tratamento de dados;
* Implementar pipelines de processamento de dados no Databricks;
* Desenvolver lógicas para matching, deduplicação e criação de registros únicos;
* Estabelecer fluxos de qualidade de dados e validação;
* Criar e manter tabelas integradas seguindo as regras de negócios estabelecidas;
* Implementar rotinas de atualização e sincronização de dados;
* Participar de revisões de código e mentoria técnica da equipe.
Requisitos Técnicos
O candidato deve ter:
* Experiência avançada em Python;
* Sólidos conhecimentos em Databricks, Delta Lake, PySpark e SQL;
* Conhecimento em técnicas de matching e deduplicação de registros;
* Experiência em implementar regras de negócios complexas em código;
* Domínio de versionamento Git e metodologias ágeis.
Candidatura
Precisamos de alguém com expertise e paixão por desenvolvimento de dados para se juntar à nossa equipe. Se você é um profissional experiente e motivado, este é o seu cargo!