O nosso candidato perfeito deve ter experiência com engenharia de dados em ambientes de produção, trabalhando com arquiteturas modernas de dados e pipelines de dados robustos.
Sua missão será garantir a confiabilidade e performance dos dados, além de contribuir com boas práticas de governança e segurança.
Você atuará em conjunto com outras áreas da empresa para garantir a integridade dos dados usados em produtos e análises.
Além disso, você precisará estar familiarizado com ferramentas como Spark, Databricks e Git, além de ter conhecimento em FinOps e otimização de custo em cloud.
Se você é uma pessoa estruturada e focada em resolução de problemas, com excelente comunicação e colaboração, então essa pode ser a oportunidade certa para você!
Principais responsabilidades:
* Sustentar e evoluir o Data Lake, com foco em performance, segurança e escalabilidade.
* Construir e manter pipelines de ingestão e transformação de dados (ETL/ELT) utilizando ferramentas como Spark e Databricks.
* Trabalhar em conjunto com outras áreas da empresa para garantir a integridade dos dados usados em produtos e análises.
* Atuar com boas práticas de versionamento, CI/CD e deploy de pipelines em ambiente cloud.
* Participar ativamente da gestão de custos analíticos (FinOps), contribuindo para um ambiente eficiente e sustentável.
Experiência:
- Mínimo de 4 anos de experiência com engenharia de dados em ambientes de produção.
Formação Acadêmica:
Ensino superior completo em Ciência da Computação, Engenharia, Sistemas de Informação, Estatística ou áreas correlatas.
Hard Skills:
- Spark, Databricks, Delta Lake
- SQL avançado
- Python para manipulação de dados
- Ferramentas de orquestração como Airflow
- Git, pipelines de CI/CD
- Noções de arquitetura de dados e segurança em cloud (preferencialmente Azure)
- Boas práticas de deploy e versionamento de dados
- Conceitos de FinOps e otimização de custo em cloud
Soft Skills:
- Pensamento estruturado e foco em resolução de problemas
- Comunicação clara e colaborativa com áreas técnicas e de negócio
- Comprometimento com qualidade e confiabilidade das entregas
- Autonomia para propor soluções e evoluções técnicas
- Curiosidade para aprender novas tecnologias e aplicar boas práticas