Vaga:
Engenheiro de Dados
Atuação:
100% home office
Projeto:
Prazo indeterminado
Buscamos por um Engenheiro de Dados para atuar em um projeto desafiador de migração de Data Lake, utilizando tecnologias modernas e boas práticas de engenharia para garantir performance, governança e escalabilidade.
Responsabilidades:
- Criar, manter e otimizar pipelines de dados com Azure Data Factory
- Processar e transformar dados com Databricks, Spark, Python/PySpark e SQL
- Versionar código utilizando GitHub e aplicar práticas de CI/CD com Azure DevOps
- Colaborar com o time de dados para garantir a qualidade, performance e documentação das soluções
- Apoiar a criação de estruturas eficientes para armazenamento, processamento e consumo de dados
Requisitos obrigatórios:
- Experiência com Azure Data Factory e Databricks
- Conhecimento sólido em soluções de dados na Azure
- Vivência com Spark, Python/PySpark e SQL para transformação de dados
- Experiência com versionamento (GitHub) e CI/CD (Azure DevOps)
- Capacidade de construção de pipelines robustos e reutilizáveis
Diferenciais:
- Experiência com ferramentas de observabilidade e monitoramento de pipelines (ex:
Datadog)
- Conhecimento em testes de dados (data quality, validation frameworks)
- Facilidade para documentar e comunicar arquitetura e decisões técnicas
Se você gosta de desafios, essa pode ser a sua oportunidade!