Descrição da Vaga
O profissional contribuirá com a estrutura de dados do Grupo Fleury por meio de técnicas, ferramentas e parceria entre os times de Digital e Tech.
Principais Atividades:
* Desenvolvimento e Evolução de Plataformas: Projetar, desenvolver e evoluir plataformas de dados robustas e escaláveis;
* Ideação e Implementação de Arquiteturas: Liderar a ideação e implementação de novas arquiteturas de dados;
* Automação e Escalabilidade: Desenvolver pipelines de dados automatizados e escaláveis;
* Documentação e Conhecimento: Documentar processos e sistemas de forma detalhada;
* Governança e Qualidade de Dados: Implementar e monitorar práticas de governança de dados;
* Relatórios e Comunicação: Criar relatórios técnicos detalhados e apresentar para stakeholders;
* Colaboração Interdisciplinar: Trabalhar com equipes de ciência de dados e engenharia de dados para entender requisitos;
* Avaliar e Incorporar Novas Tecnologias: Avaliar e incorporar novas tecnologias em conjunto com a arquitetura;
* Mentoria e Acompanhamento: Mentorar engenheiros de dados juniores e plenos;
* Melhoria Contínua: Propor melhorias contínuas nos processos e ferramentas;
Habilidades Exigidas:
* Infraestrutura como Código: Ferramentas de IaC como Terraform, Plumini e CloudFormation;
* Computação em Nuvem: Experiência com AWS, incluindo serviços como EC2, S3, Lambda, Redshift, EMR, Glue, Athena e SageMaker;
* Ferramentas de CDC: Conhecimento e uso de ferramentas de CDC;
* Armazenamento e Arquitetura de Dados: Implementação de data lakehouse e estruturas Medallion;
* Modelos de Machine Learning em Produção: Experiência no deploy e monitoramento de modelos;
* Ferramentas de ETL e Orquestração: Experiência com Apache Airflow, dbt e outras ferramentas;
* Experiência com Databricks;
* Linguagens de Programação: Proficiência em Python e SQL;
* Boas Práticas de Engenharia de Software: Aplicação de princípios de engenharia de software, como controle de versão, testes automatizados, integração contínua e deploy contínuo (CI/CD);
* Governança de Dados: Experiência com políticas de governança de dados, gestão de dados sensíveis e privados, e catálogos de dados;
* Experiência em Processar e Gerenciar Grandes Volumes de Dados (Terabytes);
* Experiência com Bancos de Dados Relacionais e Não Relacionais;
* Inglês Intermediário (Leitura Técnica);
* Experiência com Ferramentas de Gestão de Projetos;
* Habilidade para criar e apresentar relatórios técnicos e gerenciais;
* Visão Estratégica de Negócios e da Necessidade dos Times de Dados;