Responsabilidades e atribuições
* Projetar, desenvolver e sustentar pipelines de dados escaláveis com foco em ingestão via CDC (Change Data Capture) utilizando Oracle GoldenGate;
* Configurar e administrar replicações de dados em tempo real e quase tempo real entre sistemas origem e ambientes cloud;
* Garantirconsistência, integridade e sincronização dos dados entre origem e destino;
* Monitorar pipelines de ingestão, atuar em troubleshooting e otimizar performance dos processos CDC;
* Suportarestratégias de carga full e incremental (delta load);
* Desenvolver emanter pipelines de processamento de dados utilizando Azure e Databricks (Spark);
* Implementar transformações seguindo arquitetura moderna de dados no modelo Bronze, Silver e Gold;
* Otimizarpipelines visando performance, escalabilidade e eficiência de custos;
* Trabalhar comdados estruturados e semiestruturados para consumo analítico, relatórios e iniciativas de IA/ML;
* Atuar emconjunto com arquitetos de dados na definição de arquiteturas modernas de Lakehouse;
* Apoiar iniciativas de governança, catálogo de dados, lineage e compliance;
* Garantirdisponibilidade, confiabilidade, segurança e qualidade dos dados para consumo downstream.
Requisitos e qualificações
* Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas;
* Experiência prática e sólida com Oracle GoldenGate em processos de ingestão de dados e CDC (Change Data Capture), incluindo replicação em tempo real e quase tempo real;
* Vivênciano desenvolvimento, sustentação e otimização de pipelines de dados escaláveis e distribuídos;
* Experiência com ecossistema Microsoft Azure, incluindo Azure Data Factory, Azure Data Lake e Azure Data Lake Storage Gen2;
* Forte conhecimento em Databricks e processamento distribuído utilizando Spark;
* Experiência em arquiteturas modernas de dados, como Lakehouse, trabalhando com camadas Bronze, Silver e Gold;
* Vivênciacom cargas full e incrementais (delta load), garantindo integridade, consistência e sincronização dos dados;
* Conhecimento em monitoramento de pipelines, troubleshooting, tuning de performance e otimização de custos em ambientes cloud;
* Experiência com dados estruturados e semiestruturados voltados para analytics, reporting e iniciativas de IA/ML;
* Conhecimento em governança de dados, catálogo, lineage, segurança e boas práticas de arquitetura corporativa;
* Capacidade deatuar de forma colaborativa com arquitetos de dados, times analíticos e stakeholders de negócio.