Como Arquiteto de Dados Senior, você será responsável por projetar e desenvolver soluções escaláveis de dados, desenhar arquiteturas eficientes e garantir governança, segurança e alta performance.
Responsabilidades e Atribuições
* Definir e implementar arquiteturas de dados escaláveis e resilientes para apoiar operações em larga escala.
* Avaliar e adotar novas tecnologias e frameworks para modernizar a stack de dados.
* Construir e manter plataformas de dados para suportar produtos analíticos e de inteligência artificial.
* Garantir a qualidade e integridade dos dados, implementando processos robustos de validação, auditoria e monitoramento.
* Orquestrar pipelines utilizando ferramentas como Apache Airflow.
* Implementar soluções serverless e arquiteturas distribuídas para otimizar custo e performance.
* Autorizar na governança e segurança de dados, garantindo conformidade com regulamentações (LGPD, GDPR).
* Desenvolver e manter APIs e data products para integração entre sistemas internos e externos.
* Trabalhar em colaboração com gerentes de produto e cientistas de dados para transformar dados em insights estratégicos.
* Monitorar tendências tecnológicas e de mercado, propondo inovações alinhadas às necessidades do negócio.
Requisitos e Qualificações
* Proficiência avançada em SQL e otimização de consultas.
* Dominio em Python, Scala e/ou Java para manipulação e processamento de dados.
* Sólida experiência em Cloud Computing (AWS, Azure, GCP) e seus serviços de dados.
* Experiência com bancos de dados relacionais e NoSQL (PostgreSQL, Cassandra, DynamoDB).
* Conhecimento avançado em Infraestrutura como Código (Terraform, OpenTofu, CloudFormation).
* Experiência com ferramentas de orquestração de workflows (Airflow, Dagster, Prefect).
* Conhecimento avançado em monitoramento, logging e observabilidade (Prometheus, Grafana, AWS CloudWatch).
* Experiência na implementação de DataOps, CI/CD e automação de deploys.
* Dominio de segurança e compliance de dados (LGPD, GDPR, ISO 27001).
* Experiência na criação de produtos de dados e APIs escaláveis para consumo interno e externo.
* Experiência avançada com Governança de Dados e Catalogação de Dados (Data Catalog, Apache Atlas, Collibra).
* Vivência em arquitetura orientada a eventos e soluções de baixa latência.