Desenvolvimento de soluções em dados para projetos complexos e escalados
Acreditamos na importância do desenvolvimento contínuo e da evolução dos processos.
Nesta oportunidade, estamos procurando por um profissional experiente em análise e tratamento de dados com sólidos conhecimentos em arquitetura de dados e desenvolvimento de pipelines de ingestão de dados em grande escala.
Responsabilidades:
* Projetar e implementar pipelines de ingestão de dados utilizando diferentes ferramentas (Spark, Athena, SQL, NoSQL).
* Desenvolver processos de ETL/ELT com Spark, Athena, SQL e NoSQL.
* Criar e manter APIs RESTful para disponibilização de dados.
* Trabalhar em colaboração com equipes de ciência de dados e engenharia de software para integrar soluções de dados.
Requisitos:
* Experiência com Databricks ou Azure Fabric.
* Sólidos conhecimentos em ingestão de dados e arquitetura de dados.
* Desenvolvimento de ETL/ELT com Spark, Athena, SQL e NoSQL.
* Conhecimento em fluxos CI/CD.
* Desenvolvimento de API RESTful com frameworks como Flask ou FastAPI.
Benefícios:
* Trabalho colaborativo em equipe.
* Oportunidade de crescimento e desenvolvimento pessoal.
* Contribuição significativa para o projeto.
Outros:
* Remuneração competitiva.
* Pacote benefícios completa.