Desenvolvedor(a) de Soluções de Dados
A VMBears busca profissionais comprometidos com a qualidade dos dados para desempenhar o papel fundamental de Engenheiro(a) de Dados. Nossa empresa oferece consultoria em arquitetura corporativa e modernização de sistemas para nuvem, visando impulsionar os negócios dos clientes.
O(a) Desenvolvedor(a) de Soluções de Dados é responsável por construir e manter infraestruturas que garantam a confiabilidade e eficiência na movimentação, transformação e disponibilização de dados. Ele(ela) trabalha como elo entre a arquitetura e o desenvolvimento, permanecendo intrinsecamente ligado ao código que sustenta o fluxo de informações.
Nesta posição, o(a) Desenvolvedor(a) de Soluções de Dados atuará como guardião da qualidade dos dados, projetando pipelines escaláveis, monitorando sua saúde em produção e antecipando gargalos. Para este projeto, estamos procurando alguém que combine profundidade técnica em processamento distribuído e lakehouse com mentalidade de produto baseada em dados.
Responsabilidades:
* Implementar soluções com arquitetura de dados distribuída, garantindo latência e throughput que atendam aos requisitos do negócio;
* Implantar pipelines de ingestão, transformação e publicação que suportem batch + streaming em larga escala;
* Desenvolver jobs Spark/Flink e para data-warehouses colunares;
* Seguir padrões de versionamento, catalogação e lineage de dados para rastreabilidade de processamento;
* Desenvolver processos sempre visando o menor custo e maior performance em Redshift/BigQuery/Athena, propondo ajustes de partição, compressão e caching;
* Documentar processos e fluxos de trabalho de dados: Manter registros detalhados dos processos de dados para facilitar a manutenção e a melhoria contínua;
* Projetar sistemas que possam crescer conforme a demanda por dados aumenta.