Overview
Olá!
Somos a @Runtalent, com DNA inovador, consolidados no mercado de tecnologia e especializados em soluções de TI há quase duas décadas. Acompanhamos todos os avanços tecnológicos dos últimos anos e estamos juntos nessa corrida pela transformação digital.
Temos uma oportunidade para : Engenheiro de Dados
Descrição da vaga com foco em Databricks e Unity Catalog, arquitetura Lakehouse, Delta Lake e MLFlow.
Sobre a vaga
* Profundo conhecimento em Databricks e Unity Catalog, com sólida compreensão da arquitetura Lakehouse, Delta Lake e MLFlow.
* Proficiência em PySpark, SQL e processamento distribuído de dados.
* Experiência com plataformas em nuvem, especialmente Azure, e serviços como Azure Data Factory e AirFlow.
* Familiaridade com ambientes DataOps, incluindo práticas de CI / CD e controle de versão (Git, Azure DevOps).
* Experiência em performance tuning, segurança e integração de dados em ambientes cloud.
* Habilidades avançadas para resolução de problemas e depuração em ambientes distribuídos.
* Certificação Databricks (ex. : Databricks Certified Data Engineer Associate / Professional).
* Experiência com modelagem dimensional e arquitetura de dados.
* Experiência em projetos de dados financeiros (ERP, Compras).
* Certificações em cloud computing ou engenharia de dados.
* Habilidades em comunicação e capacidade de trabalhar efetivamente com equipes multifuncionais
Atividades
* Projetar, desenvolver e manter pipelines de dados ETL / ELT escaláveis usando Databricks com PySpark, SQL e Delta Lake.
* Otimizar o desempenho dos pipelines de dados, gerenciar fluxos de trabalho e monitorar execuções utilizando workflows e notebooks.
* Integrar, transformar e processar dados estruturados e não estruturados de várias fontes, como armazenamento em nuvem, APIs, JSON e arquivos diversos.
* Implementar verificações de qualidade dos dados e validações, assegurando governança, rastreabilidade e conformidade de segurança (ex. : Unity Catalog).
* Colaborar com arquitetos de dados, analistas e áreas de negócio para traduzir requisitos em modelos e soluções de dados.
* Participar ativamente em ritos de governança de dados e contribuir para a melhoria contínua dos processos de dados através de automação e documentação.
* Ter visão de produtos de dados e criar padrões reutilizáveis.
* Propor e implementar soluções inovadoras para desafios técnicos em um ambiente ágil e colaborativo.
Caso seja do seu interesse, envie o seu CV fernanda.coral@runtalent.it ou indique um amigo no portal acesse https : / / lnkd.in / d_yKpA9M
OBS. : Favor enviar currículo em português e versão inglês
Siga nossas redes sociais
* LinkedIn : https : / / lnkd.in / d4MV-Krp
* Instagram : https : / / lnkd.in / dNxstx5b
* Site : https : / / runtalent.it /
VemSerRunner!
#J-18808-Ljbffr