Desenvolvimento de Pipeline de Dados
O objetivo principal desse projeto é a construção, evolução e implantação de pipelines de dados para diversos casos de uso de negócios. Isso inclui a integração com a plataforma de marketing Salesforce.
* Projeto, implementação e otimização de pipelines de dados no ecossistema Treasure Data;
* Desenvolvimento e manutenção de fluxos de ingestão e transformação procedentes de múltiplas fontes, incluindo APIs, S3 e Fluentd;
* Criação, desenvolvimento e manutenção de aplicações e processos responsáveis por tratamento, padronização e enriquecimento de dados;
Requisitos Técnicos:
* Experiência confirmada com Treasure Data, incluindo desenvolvimento, pipelines, workflows (Digdag), TD SQL e integrações;
* Vivência em ingestão, transformação e tratamento de dados em plataformas de big data e CDPs;
* Domínio de SQL avançado e experiência com Python para automações e transformações;