Overview
Desenvolver Arquitetura e fluxo de Dados robusta e escalável, que suporte os times de dados e negócios, democratizando o acesso aos dados, de forma segura, simples, estruturada e com qualidade.
Qualificações
* Experiência com implantação de arquitetura de dados e modelagem de camadas de dados;
* Ingestão de dados via Streaming (com foco no Azure Event Hub) e Batch;
* Conhecimento em Cloud (Azure)
* Linguagem de programação : Python e PySpark (com foco no Azure Databricks e Azure Functions);
* Construção de Pipelines de ingestão e manipulação de dados (ETL / ELT), com foco em Azure Data Factory;
* Conhecimento em banco de dados (SQL Server);
* Conhecimento em banco não-relacional (Cosmos DB).
Principais desafios
* Criar e manter fluxos de dados (estruturados e ou não) que suportem soluções de negócio;
* Desenhar e construir novos modelos / pipelines de dados e criar novos processos de ETL / ELT e otimizar existentes.
#J-18808-Ljbffr