Descrição do Cargo
O engenheiro de dados especialista é responsável por projetar, desenvolver e implementar pipelines robustos para conectar dados de diversas fontes utilizando ferramentas da AWS.
Responsabilidades
* Implementar soluções escaláveis e eficientes para enriquecimento de dados com o DBT;
* Gerenciar integrações, processos de transformação e automações de tarefas usando conectores de dados, APIs SQL, Python e Rest;
* Utilizar SQL para consultas e manipulação de dados em bancos de dados relacionais e não relacionais;
* Aplique SPARK para processamento de grandes volumes de dados em tempo real e em batch.
Habilidades e Experiência
* Experiência com ferramentas de orquestração de dados como Apache Airflow;
* Noções sobre diferentes técnicas de arquitetura e modelagem de dados para fins analíticos (Ex.: Data Mesh, Data Mart, Data Lake, Data Warehouse);
* Experiência com Modelagem de Dados (relacional e/ou analítico) e processos ETL;
* Certificações AWS associadas à função de Cloud Data Engineer.