Engenheiro de Dados Sênior para MDM
O objetivo principal é liderar o desenvolvimento e implementação de um Master Data Management (MDM) de Pacientes, integrando dados de múltiplos sistemas de origem.
Responsabilidades e Atribuições
* Desenvolver e Implementar a Arquitetura de Modelagem de Dados
* Especificar e Documentar Regras de Negócios para Unificação e Tratamento de Dados
* Implementar Pipelines de Processamento de Dados no Databricks
* Desenvolver Lógicas para Matching, Deduplicação e Registro Dourado de Pacientes
* Estabelecer Fluxos de Qualidade de Dados e Validação
* Criar e Manter Tabelas Integradas Seguindo as Regras de Negócios Estabelecidas
* Implementar Rotinas de Atualização e Sincronização de Dados
* Participar de Code Reviews e Mentoria Técnica da Equipe
* Colaborar com Stakeholders de Negócios para Refinar Regras e Requisitos
Requisitos Essenciais:
* Experiência Avançada em Python
* Sólidos Conhecimentos em Databricks e Delta Lake
* Pyspark para Processamento de Dados em Larga Escala
* SQL e Modelagem de Dados
* ETL/ELT e Pipelines de Dados
* Experiência com Master Data Management (MDM) ou Projetos Similares de Integração de Dados
Diferenciais:
* Experiência Prévia com MDM na Área de Saúde
* Conhecimento em FHIR ou Outros Padrões de Dados de Saúde
* Experiência com Great Expectations para Qualidade de Dados
* Conhecimento em Frameworks de Governança de Dados
* Experiência com Mensageria (Kafka, Event Hubs)
* Familiaridade com Ferramentas de CDC (Change Data Capture)
* Conhecimento em Observabilidade (Databricks SQL Analytics, Grafana)
* Experiência com APIs RESTful para Exposição de Dados
Benefícios:
* Vale Alimentação ou Vale Refeição;
* Desconto em Cursos, Universidades e Instituições de Idiomas;
* Academia Stefanini - Plataforma com Cursos Online, Gratuitos, Atualizados e com Certificado;
* Mentoring;
* Auxílio Creche;
* Clube de Vantagens para Consultas e Exames;
* Assistência Médica;
* Assistência Odontológica;
* Clube de Vantagens e Descontos nos Melhores Estabelecimentos;
* Clube de Viagens;
* Convênio para Pet;