Resumo da PosiçãoLocalização: São Paulo / SPReporte: TecnologiaTipo Vaga: Home OfficeContratação PJTempo IntegralEstamos estruturando uma nova arquitetura de dados na MOL e buscamos um Engenheiro de Dados Sênior para esse processo. É uma função para alguém que domina Azure, Databricks, Data Lake, Data Warehouse e BI, e quer participar desde o desenho e desenvolvimento de todo o ecossistema.O desafio envolve construir um ambiente de dados moderno, escalável e bem governado, que será a base para nossos produtos, análises, relatórios corporativos e iniciativas de Inteligência Artificial.O profissional atuará ao lado do time de tecnologia e das áreas de negócio, transformando dados em informação confiável e criando padrões sólidos de ingestão, modelagem e qualidade.Tecnologias e ferramentas que fazem parte do nosso stackPlataforma PrincipalDatabricks (Spark, PySpark, SQL, Delta Lake, Autoloader, Jobs, notebooks, streaming)Armazenamento e ArquiteturaAzure Data Lake Storage Gen2 (camadas Bronze / Silver / Gold/ Feature (AI))Delta LakeAzure Blob StorageIngestão e OrquestraçãoAzure Data FactoryAzure FunctionsAzure Event HubAzure Service BusDatabricksProcessamento de DadosDatabricks (batch e streaming)Spark Structured StreamingData Warehouse / LakehouseDelta Lake na camada GoldAzure Synapse Analytics (Dedicated SQL Pool, quando necessário)BI e ConsumoPower BI (Pro/Premium)DataflowsDirect Lake / Direct QueryLinguagensPythonSQL avançadoPySpark