**Desenvolvimento de Pipelines Escaláveis: Um Desafio Excludente para Iniciantes em Dados**
Nossa empresa busca um profissional experiente para ajudar a evolução do nosso ecossistema de dados baseado em tecnologias como DeltaLake/Spark/Superset, governança, qualidade e performance. Você será responsável por desenvolver e operar pipelines escaláveis com Python.
**Modelagem de Dados: O Caminho para Conhecimento Empreendedor**
Você também será responsável por modelar dados usando uma arquitetura medalhão, otimizando custo e performance. Isso inclui otimizar consultas, partições, índices e storage, utilizando Parquet/Delta.
**Monitoramento e Documentação: Uma Fórmula para Sucesso**
Além disso, você precisará monitorar a saúde e custos dos pipelines e documentar a arquitetura, fluxos e dicionário de dados. Nossa equipe espera alguém que seja proativo, autônomo e tenha impacto direto no negócio.