Descrição do Cargo
Como Engenheiro de Dados GCP, você será responsável por projetar e desenvolver pipelines ETL/ELT para a ingestão, transformação e entrega de dados estruturados e não estruturados.
* Desenvolvimento de Pipelines: Projetar e implementar soluções escaláveis para a ingestão e processamento de grandes conjuntos de dados em diferentes fontes.
* Trabalho com Dados: Garantir a qualidade, consistência e confiabilidade dos dados por meio de validação, monitoramento e testes automatizados.
* Otimização de Fluxos: Otimizar os fluxos de processamento de dados visando melhor custo e performance.
* Colaboração: Colaborar com Cientistas de Dados, Analistas e áreas de negócio para fornecer datasets limpos, confiáveis e bem documentados.
* Arquitetura de Serviços Nativos de Nuvem: Trabalhar com serviços nativos de nuvem (ex.: BigQuery, Dataproc, Dataflow, Databricks, Snowflake) para implementar arquiteturas escaláveis.
* Práticas de Segurança: Assegurar conformidade com normas de segurança, governança e privacidade (ex.: PII, GDPR, LGPD).
Requisitos:
* Conhecimentos Técnicos: Conhecimento em frameworks de ingestão de dados, pipelining e otimização de fluxos.
* Serviços Nativos de Nuvem: Experiência com serviços nativos de nuvem como BigQuery, Dataproc, Dataflow e Databricks.
* Ci/Cd e IaC: Boas práticas de CI/CD e Infraestrutura como Código (IaC) em pipelines de dados.
* Linguagens de Programação: Conhecimento em linguagens de programação como Python ou Java.
Benefícios:
* Crescimento Profissional: A oportunidade de aprender e crescer profissionalmente trabalhando com tecnologias avançadas.
* Inovação: Desenvolver soluções inovadoras para problemas complexos.
* Equipe Dinâmica: Integrar-se a uma equipe dinâmica e apoiadora.
Ambiente de Trabalho:
* Nova Tecnologia: Trabalhar com tecnologias avançadas e modernas.
* >>>Flexibilidade: Flexibilidade no horário de trabalho e ambiente de trabalho criativo.
,