A missão do Especialista em Engenharia de Dados será atuar na arquitetura, construção e evolução do Data Lake e dos produtos de dados desenvolvidos pelo time, incluindo soluções de Analytics, agentes e modelos de machine learning. Trabalhará em conjunto com outro especialista de engenharia de dados na definição e implementação de arquiteturas, modelagem e disponibilização de dados em ambientes distribuídos, utilizando tecnologias como AWS, Spark, Trino e Athena, além de viabilizar o consumo eficiente dessas informações por ferramentas como o Metabase. Será responsável por desenvolver e otimizar pipelines de dados, garantindo performance, escalabilidade, qualidade e governança das informações. Espera-se que o profissional atue com alta autonomia técnica, contribuindo para decisões de arquitetura e para a evolução contínua do ecossistema de dados, assegurando que as soluções atendam às necessidades analíticas e de inteligência dos produtos com robustez e confiabilidade. O QUE VOCÊ VAI FAZER: Atuar na construção e evolução da arquitetura do Data Lake e dos produtos de dados do time (Analytics, agentes e modelos);
Desenvolver, otimizar emanter pipelines de dados escaláveis e confiáveis em ambiente AWS;
Modelar e estruturar dados para consumo analítico e operacional, garantindo qualidade, performance e governança;
Definir padrões, arquiteturas e boas práticas de dados;
Implementar e otimizar consultas e camadas de acesso a dados utilizando Athena e Trino;
Processar e transformargrandes volumes de dados utilizando Spark;
Garantir a disponibilização eficiente de datasets para consumo em ferramentas analíticas como Metabase;
Monitorar, diagnosticare otimizar o desempenho de pipelines, queries e tabelas no Data Lake;
Assegurar qualidade, integridade e rastreabilidade dos dados ao longo de todo o pipeline;
Apoiar a definição de estratégias de particionamento, versionamento e organização de dados;
Contribuir com a documentação técnica e evolução das boas prática