Se você busca uma carreira de alta complexidade, desenvolvendo soluções inovadoras para a gestão de dados, esta é sua oportunidade!
Ficha Técnica
* Título: Engenheiro de Dados Sênior
* Funcionalidade:
Responsável pela liderança do desenvolvimento e implementação de um Master Data Management (MDM) de Pacientes. Trabalhará na modelagem de dados, especificação de regras de negócios e implementação dessas regras e tabelas no ambiente Databricks.
Ao trabalhar nesse projeto, você estará desempenhando funções importantes como:
* Desenvolver e implementar a arquitetura de modelagem de dados do MDM de Pacientes;
* Especificar e documentar regras de negócios para unificação e tratamento de dados de pacientes;
* Implementar pipelines de processamento de dados no Databricks;
* Desenvolver lógicas para matching, deduplicação e criação de registro padrão de pacientes;
* Estabelecer fluxos de qualidade de dados e validação;
* Criar e manter tabelas integradas seguindo as regras de negócios estabelecidas;
* Implementar rotinas de atualização e sincronização de dados;
* Participar de revisões de código e mentoria técnica da equipe;
* Colaborar com stakeholders de negócios para refinar regras e requisitos.
O profissional ideal para esse papel possui:
* Experiência avançada em Python;
* Sólidos conhecimentos em Databricks e Delta Lake, PySpark para processamento de dados em larga escala, SQL e modelagem de dados, ETL/ELT e pipelines de dados;
* Experiência com Master Data Management (MDM) ou projetos similares de integração de dados;
* Conhecimento em técnicas de matching, fuzzy matching e deduplicação de registros;
* Experiência com implementação de regras de negócios complexas em código;
* Domínio de versionamento Git e metodologias ágeis;
* Experiência com boas práticas de desenvolvimento (testes unitários, documentação).
Possuir habilidades adicionais em áreas como FHIR ou outros padrões de dados de saúde, Great Expectations para qualidade de dados, frameworks de governança de dados, mensageria (Kafka, Event Hubs), ferramentas de CDC (Change Data Capture) e observabilidade (Databricks SQL Analytics, Grafana) será considerado um diferencial.
Essa oportunidade é perfeita para aqueles que buscam desafios profissionais significativos e contribuir com suas habilidades para melhorar o mundo dos dados.