Papel na empresa:Construir pipeline de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para que o time de negócios possa analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados utilizando Azure Data Factory.Desenvolver notebooks em Python e SQL usando Databricks.Construir um Modern Data Warehouse com Synapse Analytics (Serverless & Dedicated).Desenvolver Data Governance usando Unity Catalog ou Purview.Trabalhar com ingestões de dados em Datalakehouse.Definir e explicar conceitos de Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.Manipular dataframes e RDDs em PySpark de forma eficiente e escalável.Utilizar diferentes tipos de junções, subqueries e funções agregadas em SQL.Realizar análise exploratória de dados (EDA) e gerar modelos de aprendizado de máquina com PySpark.Otimizar desempenho de aplicações de processamento de dados usando PySpark.Definir e explicar conceitos de DevOps de forma abrangente e crítica.Utilizar ferramentas de CI/CD, gerenciar infraestrutura como código, comunicar conceitos e liderar projetos de DevOps.Requisitos:Inglês para conversação nível B2-C1 (Pós-intermediário e Avançado).Identificar requisitos de negócios para modelos de dados complexos.Conhecimento avançado em arquitetura de Big Data end-to-end.Capacidade de projetar, implementar e testar modelos de dados em bancos relacionais ou não relacionais.Utilizar ferramentas de modelagem de dados e documentar modelos para comunicação eficaz.Experiência em liderar engenheiros de dados JR e PL.Diferenciais:Projetos internacionais de Big Data.Liderar projetos de BI complexos.Compreensão aprofundada de Big Data, computação em nuvem e soluções distribuídas.Experiência em projetos de DB, DW, lake e lakehouse, incluindo segurança.Habilidade em resolver problemas de dados complexos de forma independente.Capacidade de adaptação rápida a mudanças em ambientes dinâmicos.Nossos Incentivos:Auxílio médico, Wellhub, auxílio terapia, teleatendimento em Nutrição, seguro de vida, dia de folga no aniversário, parcerias com instituições de ensino, gamificação, English Club, reembolso + bônus por certificação e outros.Atuação remota.Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.
#J-18808-Ljbffr