Desenvolvimento de Pipeline de Dados
O trabalho envolve a criação e otimização de pipelines de dados em DBT Core e Airflow. É necessário monitorar DAGs, ajustar operadores e gerenciar dependências.
* Criar, manter e otimizar pipelines de dados
* Monitorar e ajustar DAGs
* Gerenciar dependências e versionamento
Além disso, é necessário garantir a documentação das transformações e trabalhar com BigQuery, Snowflake ou Redshift.
Nossas necessidades incluem:
* DBT – modelagem SQL avançada
* Airflow – criação e monitoramento de DAGs
* SQL avançado e Python intermediário/avançado
* GCP (BigQuery), Snowflake ou Redshift
* Git, CI/CD e testes automatizados
Procuremos alguém com pensamento analítico, boa comunicação e compromisso com qualidade e performance.