Desenvolvedor(a) de Dados - Alta Escalabilidade
A oportunidade perfeita para profissionais que desejam atuar em projetos de alta complexidade e contribuir para a inovação tecnológica.
* Criar pipelines escaláveis para armazenar, processar e disponibilizar grandes volumes de dados com alta performance.
* Trabalhar em parceria com times de Data Science para projetar e implementar soluções baseadas em dados e Machine Learning.
* Desenvolver e otimizar pipelines de ingestão, processamento e transformação de dados, garantindo qualidade, eficiência e governança.
* Implementar e gerenciar workflows de dados utilizando ferramentas como Apache Airflow, garantindo a automação e escalabilidade dos processos de ingestão e processamento.
* Aplicar conceitos de CI/CD para pipelines de dados, testes automatizados em ETLs, versionamento de dados e monitoramento contínuo da qualidade e confiabilidade dos dados.
* Garantir boas práticas de proteção de dados, controle de acessos, auditoria e conformidade com regulamentos como LGPD e GDPR.
* Atuar como referência técnica na implementação de soluções em nuvem, promovendo as melhores práticas de engenharia de dados, segurança, confiabilidade e escalabilidade.
Para isso, buscamos profissionais com:
* Domínio da linguagem SQL, incluindo melhores práticas, otimização de consultas e modelagem de dados eficiente.
* Experiência com bancos de dados relacionais (SQL) e não relacionais (NoSQL), com foco em desempenho e escalabilidade.
* Conhecimento em sistemas de controle de versão, especialmente Git.
* Familiaridade com consumo e criação de APIs para manipulação e integração de dados.
* Conhecimento em Data Warehousing e tecnologias de Big Data para lidar com grandes volumes de dados.
* Capacidade de criar e manter documentações claras e acessíveis para facilitar o uso dos recursos por outros usuários.
* Experiência com organização e entregas de projetos de alta complexidade em engenharia de dados.
* Experiência com provedores de nuvem, com foco em Google Cloud Platform (GCP) e serviços como Cloud Functions, BigQuery, Pub/Sub, Dataflow e Cloud Storage.
* Experiência com ferramentas de Data Science, incluindo bibliotecas e frameworks para modelagem e análise de dados.
* Infraestrutura como Código (IaC) e Automação: Conhecimento em Terraform para provisionamento e gerenciamento de infraestrutura na nuvem.
* Certificação Google Cloud Certified – Professional Data Engineer, demonstrando expertise em soluções de dados na nuvem.