Resumo da Posição
Localização: São Paulo / SP
Reporte: Tecnologia
Tipo Vaga: Home Office
Contratação PJ
Tempo Integral
Estamos estruturando uma nova arquitetura de dados na MOL e buscamos um Engenheiro de Dados Sênior para esse processo. É uma função para alguém que domina Azure, Databricks, Data Lake, Data Warehouse e BI, e quer participar desde o desenho e desenvolvimento de todo o ecossistema.
O desafio envolve construir um ambiente de dados moderno, escalável e bem governado, que será a base para nossos produtos, análises, relatórios corporativos e iniciativas de Inteligência Artificial.
O profissional atuará ao lado do time de tecnologia e das áreas de negócio, transformando dados em informação confiável e criando padrões sólidos de ingestão, modelagem e qualidade.
Tecnologias e ferramentas que fazem parte do nosso stackPlataforma Principal
* Databricks (Spark, PySpark, SQL, Delta Lake, Autoloader, Jobs, notebooks, streaming)
Armazenamento e Arquitetura
* Azure Data Lake Storage Gen2 (camadas Bronze / Silver / Gold/ Feature (AI))
* Delta Lake
* Azure Blob Storage
Ingestão e Orquestração
* Azure Data Factory
* Azure Functions
* Azure Event Hub
* Azure Service Bus
* Databricks
Processamento de Dados
* Databricks (batch e streaming)
* Spark Structured Streaming
Data Warehouse / Lakehouse
* Delta Lake na camada Gold
* Azure Synapse Analytics (Dedicated SQL Pool, quando necessário)
BI e Consumo
* Power BI (Pro/Premium)
* Dataflows
* Direct Lake / Direct Query
Linguagens
* Python
* SQL avançado
* PySpark