Estamos buscando um(a) Data Engineer com foco em Azure para atuar em um time internacional e multicultural, colaborando com profissionais de diferentes países em projetos globais de dados. Trata-se de uma oportunidade em uma grande consultoria global de tecnologia, reconhecida por atuar em projetos complexos de transformação digital para grandes empresas ao redor do mundo.
A posição é 100% remota, com contratação no modelo PJ, e exige inglês avançado, já que a comunicação diária acontece com times e stakeholders internacionais.
Principais responsabilidades
* Criar e manter soluções de armazenamento de dados utilizando Azure SQL Database, Azure Data Lake e Azure Blob Storage
* Projetar, implementar e manter pipelines de dados para ingestão, processamento e transformação em ambientes Azure
* Desenvolver modelos de dados voltados para analytics
* Criar e manter processos de ETL (Extract, Transform, Load) utilizando Azure Data Factory ou tecnologias similares
* Utilizar Azure Data Factory e Databricks para construção e processamento de grandes volumes de dados
* Implementar processos de validação e limpeza de dados, garantindo qualidade, integridade e confiabilidade das informações
* Garantir segurança e compliance dos dados
* Colaborar com engenheiros de dados, times técnicos e stakeholders de negócio para entender requisitos e transformá-los em arquiteturas de dados escaláveis e confiáveis
Requisitos técnicos
* Experiência com Azure DevOps
* Conhecimento em Apache Spark e Python
* Forte domínio de SQL
* Experiência com Azure Databricks
* Conhecimento em tecnologias de Big Data
* Experiência com ingestão de dados em Azure
* Programação em PySpark, Python e SQL
Perfil buscado
* Forte base técnica em engenharia de dados
* Capacidade analítica e de resolução de problemas
* Boa comunicação para interação em times internacionais
* Experiência colaborando com times multidisciplinares