Arquiteto de Dados em Cloud
Desenvolva soluções inovadoras para problemas complexos.
* Infraestrutura: Organize e automatize a infraestrutura em nuvem utilizando ferramentas como Terraform ou equivalentes.
* DataOps/MLOps: Implemente práticas eficazes para pipelines, versionamento e deploy automatizado em GitHub/Azure DevOps.
* Monitoramento: Garanta observabilidade e monitoramento de pipelines e clusters (Azure Monitor, Log Analytics, Databricks Monitoring).
Requisitos Técnicos:
* Experiência sólida em Azure: Data Lake Gen2, Databricks, Azure Data Factory, Synapse, Unity Catalog, Monitor/Log Analytics, Networking.
* Forte conhecimento em engenharia de dados: modelagem, processamento em batch e streaming, otimização de performance e custos.
* Conhecimento em Infraestrutura como Código (Terraform, ARM Templates).
* Práticas de CI/CD e DevOps aplicadas a pipelines de dados.
* Programação em Python e SQL para desenvolvimento de ETL/ELT em grande escala.