Olá!
Somos a @Runtalent, com DNA inovador, somos consolidados no mercado de tecnologia e especializados em soluções de TI há quase duas décadas. Acompanhamos todos os avanços tecnológicos dos últimos anos e estamos juntos nessa corrida pela transformação digital. 🚀
Temos uma oportunidade para: Engenheiro de Dados Pleno/Sênior
📌 Local: Home office
📌Tempo de Projeto: indeterminado
📌Idioma: Inglês - Avançado
Venha conhecer nossas parcerias no segmento de saúde, bem estar e educação.
Sobre o Perfil:
Requisitos:
* Profundo conhecimento em Databricks e Unity Catalog, com sólida compreensão da arquitetura Lakehouse, Delta Lake e MLFlow.
* Proficiência em PySpark, SQL e processamento distribuído de dados.
* Experiência com plataformas em nuvem, especialmente Azure, e serviços como Azure Data Factory e AirFlow.
* Familiaridade com ambientes DataOps, incluindo práticas de CI/CD e controle de versão (Git, Azure DevOps).
* Experiência em performance tuning, segurança e integração de dados em ambientes cloud.
* Habilidades avançadas para resolução de problemas e depuração em ambientes distribuídos.
Diferenciais
* Certificação Databricks (ex.: Databricks Certified Data Engineer Associate/Professional).
* Experiência com modelagem dimensional e arquitetura de dados.
* Experiência em projetos de dados financeiros (ERP, Compras).
* Certificações em cloud computing ou engenharia de dados.
* Habilidades em comunicação e capacidade de trabalhar efetivamente com equipes multifuncionais
Atividades:
* Projetar, desenvolver e manter pipelines de dados ETL/ELT escaláveis usando Databricks com PySpark, SQL e Delta Lake.
* Otimizar o desempenho dos pipelines de dados, gerenciar fluxos de trabalho e monitorar execuções utilizando workflows e notebooks.
* Integrar, transformar e processar dados estruturados e não estruturados de várias fontes, como armazenamento em nuvem, APIs, JSON e arquivos diversos.
* Implementar verificações de qualidade dos dados e validações, assegurando governança, rastreabilidade e conformidade de segurança (ex.: Unity Catalog).
* Colaborar com arquitetos de dados, analistas e áreas de negócio para traduzir requisitos em modelos e soluções de dados.
* Participar ativamente em ritos de governança de dados e contribuir para a melhoria contínua dos processos de dados através de automação e documentação.
* Ter visão de produtos de dados e criar padrões reutilizáveis.
* Propor e implementar soluções inovadoras para desafios técnicos em um ambiente ágil e colaborativo.
Caso seja do seu interesse, envie o seu CV juliana.santos@runtalent.it
Ou indique um amigo no portal acesse https://lnkd.in/d_yKpA9M
📲 Siga nossas redes sociais:
- LinkedIn: https://lnkd.in/d4MV-Krp
- Instagram: https://lnkd.in/dNxstx5b
- Site: https://runtalent.it/
#VemSerRunner! 🚀🚀💙💙