Especialista em Ciência de Dados
">
Um especialista em ciência de dados é fundamental para este papel. Ele deve ter uma sólida formação em áreas como Ciência da Computação, Engenharias ou Sistemas de Informação.
">
O candidato ideal deve possuir conhecimento avançado em análise e desenvolvimento de sistemas, com experiência em definição de arquitetura e orientação a objetos. Além disso, a construção de serviços de integração de dados em qualquer camada é crucial.
">
A plataforma Databricks é essencial para o sucesso nessa função, e o especialista deve ter experiência comprovada na mesma. Desenvolver pipelines com SQL, Spark (Python/Scala) e Delta Lake (merge, vacuum, time travel) também é necessário.
">
A otimização de workloads e uso de ferramentas como Unity Catalog (governança) e Databricks Workflows (orquestração) são habilidades fundamentais para essa posição.
">
Arquitetura de pipelines ETL/ELT modernos e práticas de DevOps/DataOps são fundamentais para garantir a qualidade dos dados.
">
Conhecimento em Power BI para integração com Databricks e vivência com Azure Data Factory (ou similares) são adicionais vantagens para o candidato.
">
Este especialista deve ser capaz de construir uma plataforma de dados resiliente que abranja todos os quesitos de qualidade de dados.
">
Manter e desenvolver funcionalidades da plataforma de dados, auxiliar na análise e definição de implementação de novas tecnologias e atuar em equipes de desenvolvimento utilizando métodos ágeis são responsabilidades importantes.
">
Avaliar novas tecnologias e frameworks de mercado e auxílio em definições de políticas de governança também fazem parte do perfil desejado.