Ao liderar a transformação de dados, você se torna uma peça fundamental para o sucesso da empresa. Nossa equipe procura por um profissional com sólida experiência em Python para desempenhar papel crucial no desenvolvimento e implementação de Master Data Management (MDM).
Resumo da Vaga
Buscamos um Engenheiro de Dados Sênior com conhecimentos avançados em Python para trabalhar na modelagem de dados, especificação de regras de negócios e implementação dessas regras e tabelas no ambiente Databricks.
Responsabilidades
* Desenvolver e implementar a arquitetura de modelagem de dados do MDM;
* Especificar e documentar regras de negócios para unificação e tratamento de dados de pacientes;
* Implementar pipelines de processamento de dados no Databricks;
* Desenvolver lógicas para matching, deduplicação e criação de registros ouvintes;
* Estabelecer fluxos de qualidade de dados e validação;
* Criar e manter tabelas integradas seguindo as regras de negócios estabelecidas;
* Implementar rotinas de atualização e sincronização de dados;
* Participar de revisões de código e mentoria técnica da equipe;
* Colaborar com stakeholders de negócios para refinar regras e requisitos.
Requisitos Técnicos
* Experiência avançada com Python;
* Sólidos conhecimentos em Databricks e Delta Lake;
* PySpark para processamento de dados em larga escala;
* SQL e modelagem de dados;
* ETL/ELT e pipelines de dados;
* Experiência com Master Data Management (MDM) ou projetos similares de integração de dados;
* Conhecimento em técnicas de matching, fuzzy matching e deduplicação de registros;
* Experiência com implementação de regras de negócios complexas em código;
* Domínio de versionamento Git e metodologias ágeis;
* Experiência com boas práticas de desenvolvimento (testes unitários, documentação).
O nosso time está à espera de alguém que tenha experiencia com os temas abordados acima. Se você é entusiasmado(a) e motivado(a), este é o seu lugar!