Senior Engenheiro de Dados
O papel do engenheiro de dados sênior é liderar o desenvolvimento e implementação de soluções de modelagem de dados avançadas para melhorar a qualidade dos dados em larga escala.
A posição é responsável por:
* Desenvolver e implementar arquiteturas de modelagem de dados avançadas;
* Especificar e documentar regras de negócios complexas;
* Implementar pipelines de processamento de dados escaláveis;
* Desenvolver lógicas para matching, deduplicação e criação de registros únicos;
* Estabelecer fluxos de qualidade de dados e validação;
* Criar e manter tabelas integradas seguindo as regras de negócios estabelecidas;
* Implementar rotinas de atualização e sincronização de dados;
* Participar de code reviews e mentoria técnica da equipe;
* Colaborar com stakeholders de negócios para refinar regras e requisitos;
Requisitos essenciais:
* Experiência avançada com Python;
* Sólidos conhecimentos em Databricks, Delta Lake, PySpark e SQL;
* ETL/ELT e pipelines de dados;
* Conhecimento em técnicas de matching, fuzzy matching e deduplicação de registros;
* Experiência com implementação de regras de negócios complexas em código;
* Domínio de versionamento Git e metodologias ágeis;
* Experiência com boas práticas de desenvolvimento (testes unitários, documentação);
Diferenciais:
* Experiência prévia com MDM na área de saúde;
* Conhecimento em FHIR ou outros padrões de dados de saúde;
* Experiência com Great Expectations para qualidade de dados;
* Conhecimento em frameworks de governança de dados;
* Experiência com mensageria (Kafka, Event Hubs);
* Familiaridade com ferramentas de CDC (Change Data Capture);
* Conhecimento em observabilidade (Databricks SQL Analytics, Grafana);
* Experiência com APIs RESTful para exposição de dados;
Benefícios:
Vale Alimentação ou Vale Refeição;
Desconto em cursos, universidades e instituições de idiomas;
Academia Stefanini - plataforma com cursos online, gratuitos, atualizados e com certificado;
Mentoring;
Auxílio Creche;
Clube de vantagens para consultas e exames;
Assistência Médica;
Assistência Odontológica;
Clube de vantagens e descontos nos melhores estabelecimentos;
Clube de viagens;
Convênio para Pet;
e muito mais...