Resumo da vaga:
O objetivo é colaborar para o desenvolvimento do ecossistema de dados com tecnologias como DeltaLake/Spark/Superset.
Habilidades Requeridas
* Modelagem avançada e SQL
* Python, Spark, Deltalake e Arquitetura Scalável
* Desenvolvimento de pipelines escaláveis em python e Airflow
* Versionamento com GitHub e CI/CD
* Métodos ágeis e comunicação eficaz com públicos técnicos e de negócio
Responsabilidades
* Desenvolver e operar pipelines escaláveis baseados em Python
* Modelar dados, usando uma arquitetura escalável, otimizando custo e performance
* Optimizar consultas, partições, índices e storage (Parquet/Delta)
* Monitorar saúde/custos dos pipelines e documentar arquitetura, fluxos e dicionário de dados
Contamos com profissionais apoiando o desenvolvimento de soluções inovadoras, aproveitando suas habilidades em modelo ágil e comunicação. Priorizamos o crescimento pessoal e profissional de nossos talentos.