Descrição do Cargo
O Engenheiro de Dados Sênior terá como responsabilidade desenvolver e manter pipelines de dados usando Spark, PySpark ou Scala no Databricks, garantindo automação e performance em processos ETL de grande volume.
Faz parte dos seus deveres:
* Modelar, integrar e transformar dados complexos utilizando SQL avançado, assegurando qualidade e disponibilidade para áreas de negócio e analytics.
* Criar e otimizar jobs em Spark para ingestão, limpeza, padronização e enriquecimento de dados provenientes de múltiplas fontes.
* Monitorar, documentar e otimizar a infraestrutura de dados, garantindo governança, escalabilidade, segurança e alto desempenho em ambientes de nuvem e plataformas como Databricks.
Competências necessárias:
* Experiência com Spark, PySpark e Scala.
* Conhecimento de SQL avançado.
* Habilidades em programação e otimização de pipelines de dados.
Vantagens:
* Oportunidade de trabalhar com tecnologias inovadoras.
* Ambiente de trabalho colaborativo e dinâmico.
* Possibilidade de crescer profissionalmente.