Arquiteto de Dados
Desenvolver e implementar soluções de armazenamento de dados em nuvem.
Responsabilidades
1. Projetar e manter a arquitetura de cloud focada em dados (Data Lake, Lakehouse, DWH).
2. Gerenciar e provisionar recursos de computação (clusters Spark, Databricks, VMs, containers, etc.).
3. Automatizar o deploy e configuração de recursos via infraestrutura como código (IaC).
4. Trabalhar com engenheiros de dados para garantir performance e disponibilidade dos pipelines.
5. Atuar no controle de segurança e governança de dados (acesso, criptografia, compliance).
6. Administrar ambientes com Unity Catalog, metastore, storage credentials e external locations.
7. Monitorar e otimizar custos de cloud relacionados à área de dados.
8. Colaborar com time de segurança, DevOps e arquitetura corporativa para garantir aderência a padrões.
Experiência
* Infraestrutura cloud: Azure, AWS ou GCP.
* Vivência com arquitetura de plataformas de dados em cloud (ex: Lakehouse, Delta Lake, Snowflake, BigQuery).
* Experiência com Databricks Administration: clusters, tokens, jobs, Unity Catalog, workspaces.
* Domínio de Infraestrutura como Código (ex: Terraform, Bicep, CloudFormation).
* Conhecimento em controle de acesso (IAM, RBAC, ABAC) e autenticação com AD/SAML/OAuth.
* Experiência em monitoramento e logging (ex: Azure Monitor, CloudWatch, Datadog).
* Familiaridade com conceitos de networking em cloud (VPC, subnets, peering, private endpoints).
* Capacidade de administrar storage accounts, external locations e data access policies para múltiplos ambientes.