Engenheiro de Dados
Ao criar soluções personalizadas para clientes, garantimos escalabilidade, qualidade e segurança em ambientes modernos de nuvem.
Desenvolvemos pipelines de ingestão de dados em grande escala, projetamos processos de ETL/ELT utilizando diferentes ferramentas (Spark, Athena, SQL, NoSQL), criamos e mantemos APIs RESTful e trabalhamos em colaboração com equipes de ciência de dados e engenharia de software.
Responsabilidades:
* Projetar e implementar pipelines de ingestão de dados;
* Desenvolver processos de ETL/ELT utilizando diferentes ferramentas;
* Criar e manter APIs RESTful;
* Trabalhar em colaboração com equipes de ciência de dados e engenharia de software.
Requisitos:
* Experiência com Databricks ou Azure Fabric;
* Sólidos conhecimentos em ingestão de dados e arquitetura de dados;
* Desenvolvimento de ETL/ELT com Spark, Athena, SQL e NoSQL;
* Experiência em AWS, Azure ou GCP;
* Desenvolvimento em Python.
Diferenciais:
* Experiência com ferramentas de orquestração;
* Conhecimento em práticas de DataOps e observabilidade de dados.