Engenheiro de Dados Sênior
Requisitos Obrigatórios
Sólida experiência consolidada em Engenharia de Dados
Domínio de AWS : experiência prática com S3, Glue, Lambda, Kinesis, DMS, MWAA (Airflow), Athena, DynamoDB
Sólidos conhecimentos em Apache Airflow : desenvolvimento de DAGs complexas, custom operators, sensores, retry logic e monitoramento
Python avançado : desenvolvimento de pipelines, bibliotecas de transformação de dados, testes unitários
PySpark : otimização de jobs, particionamento, broadcast, cache, tune de performance
SQL avançado : queries complexas, window functions, CTEs, otimização de performance
Bancos de dados relacionais : PostgreSQL, MySQL (modelagem, índices, tuning)
Data lake e formatos : experiência com arquiteturas medallion, formatos colunares (Parquet, Iceberg)
Infraestrutura como Código (Terraform) : provisionamento de recursos AWS, módulos, workspaces, state management
Git e CI / CD : versionamento, branching strategies, GitHub Actions, testes automatizados
Outras Informações
100% remoto
Projeto 3 meses com grande possibilidades de prorrogar
#J-18808-Ljbffr