Alerta de vaga - 100% remoto
EcommIT, mais de 15 anos integrando o DNA EcommIT nas empresas líderes do mercado de meios de pagamento. Venha fazer parte do nosso time.
Vaga
: ENGENHEIRO DE DADOS DATABRICKS RESOURE FOR SAP
Modelo de trabalho: 100% remoto
Início
: Imediato
Período de Alocação:
12 meses - Grandes chances de renovação
Idioma
: Inglês Avançado
Conhecimentos Técnicos Requeridos
• Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.
• Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.
• Otimização de desempenho: otimize o desempenho do processamento de dados e solucione problemas no ambiente do Databricks.
• Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.
• Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.
• Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.
• Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.
Conhecimentos Técnicos Desejáveis
Habilidades técnicas:
* Proficiência no uso do Azure Databricks e do Spark para processamento de dados.
* A compreensão da estrutura MDMF será uma vantagem adicional
* Experiência com SQL e gerenciamento de banco de dados.
Experiência em nuvem:
* Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure.
Modelagem de dados:
* Capacidade de projetar e implementar modelos de dados complexos.
Solução de problemas:
* Fortes habilidades analíticas e de resolução de problemas.
Comunicação:
* Excelentes habilidades de comunicação para colaborar com equipes multifuncionais.
* Apoie e interaja com diversas equipes em vários locais e fusos horários.
* Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos.
* Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de alteração para garantir que os SLAs sejam atendidos.