Desenvolvimento de Soluções de Dados Integrados
O Engenheiro de Dados GCP será responsável pelo planejamento, execução e manutenção de soluções de integração de dados confiáveis, escaláveis e seguras.
* Design e Implementação de Fluxos ETL/ELT:
* Projetar e desenvolver pipelines ETL/ELT para ingestão, transformação e entrega de dados estruturados e não estruturados, garantindo a qualidade e consistência dos dados.
* Integração com Múltiplas Fontes de Dados:
* Implementar frameworks de ingestão de dados a partir de múltiplas fontes (bancos de dados, APIs, arquivos, streaming etc.) e otimizar fluxos de processamento de dados visando custo e performance.
* Garantia da Qualidade dos Dados:
* Garantir qualidade, consistência e confiabilidade dos dados por meio de validação, monitoramento e testes automatizados, colaborando com Cientistas de Dados, Analistas e áreas de negócio para fornecer datasets limpos, confiáveis e bem documentados.
Atribuições do Cargo:
* Realizar o planejamento, execução e manutenção de projetos de integração de dados.
* Criar e implementar pipelines ETL/ELT para resolver problemas de integração de dados.
* Determinar as necessidades de hardware e software para os projetos de integração de dados.
* Colaborar com os departamentos de desenvolvimento e operação para garantir a consistência entre as diferentes plataformas de tecnologia.
Habilidades e Conhecimentos Exigidos:
* Especialização em Ci캮xata ou Administração de Empresas.
* Conhecimento avançado em Python, Java, SQL e AWS/GCP/Azure.
* Familiaridade com aplicações de ETL/ELT como Apache Beam, Spark, Hadoop, etc.
* Experiência em trabalhar em equipes de desenvolvimento de aplicações web.
Vantagens do Cargo:
* Opportunity para trabalhar em uma equipe diversificada e inovadora.
* Ambiente de trabalho dinámico e flexível.
* Possibilidade de crescimento profissional dentro da empresa.
* Benefícios competitivos e plano de carreira clarificado.