Estamos procurando um profissional qualificado para trabalhar como Engenheiro de Dados no desenvolvimento de pipelines de dados e colaboração em equipe.
Desenvolvimento de Pipelines
A criação e manutenção de pipelines de dados são fundamentais para a ingestão, limpeza e transformação de dados. Será responsável por desenhar e implementar soluções eficazes para o processamento de grandes conjuntos de dados.
* Elaborar e executar scripts em linguagem de programação Python para automatizar tarefas de coleta, limpeza e transformação de dados;
* Desenvolver e manter pipelines de dados utilizando ferramentas de fluxo de dados como Nifi ou Azure Data Factory;
Habilidades Técnicas
Para este cargo é necessário ter conhecimento em tecnologias como:
* Ferramentas de ETL (Extração, Transformação e Carregamento) como AWS Glue ou dbt;
* Bancos de dados relacionais como SQL Server ou PostgreSQL;
* Linguagens de programação como Python e SQL;
* Orcamentos de pipeline como Apache Airflow ou Azure Data Factory;
Prestações
O candidato selecionado terá acesso a uma equipa multidisciplinar e respeito à diversidade.