Descrição do Cargo
O profissional de dados é responsável por projetar e manter infraestruturas de dados confiáveis, garantindo alta performance. Além disso, atua como elo entre a arquitetura e o desenvolvimento, permanecendo intrinsecamente ligado ao código que sustenta o fluxo de informações.
* Implementar soluções com arquitetura de dados distribuída, garantindo latência e throughput adequados;
* Implantar pipelines de ingestão, transformação e publicação para apoiar processos batch e streaming em larga escala;
* Desenvolver jobs Spark/Flink e procedimentos de data-warehouse colunares;
* Seguir padrões de versionamento, catalogação e linha de base de dados para rastreabilidade dos processamentos;
* Desenvolver processos visando maior eficiência e menor custo em Redshift/BigQuery/Athena, propondo ajustes de partição, compressão e caching;