Sobre a DataEX:
Com 12 anos de atuação no mercado, a DataEX é uma consultoria especializada em Dados e IA, com parcerias estratégicas com Microsoft, AWS e Databricks, atuando em projetos de alto impacto para grandes clientes. Valorizamos a inovação, a colaboração, o desenvolvimento contínuo e a qualidade de vida, com incentivos para certificações e bem-estar.
Contexto do Projeto:
Estamos coletando perfis com foco em Engenharia de Dados em ambientes Azure/Fabric para atuação em projetos rotativos de Delivery.
Perfil técnico esperado:
* Experiência comprovada em linguagens de programação como Python e PySpark.
* Forte conhecimento de SQL e bancos de dados relacionais e não relacionais.
* Experiência com ferramentas de ETL e frameworks de Big Data (Microsoft Fabric, Spark e Databricks).
* Conhecimento de serviços em nuvem (Azure).
* Conhecimentos em Performance de queries SQL.
Diferenciais:
* Certificações: Azure Data Fundamental (AZ900), Azure Data Engineer Associate (DP203), Fabric Analytics Engineer Associate (DP-600) e/ou Fabric Data Engineer Associate (DP-700)
* Inglês intermediário - avançado
Escopo de Atuação:
* Desenvolver e manter pipelines de dados complexos e eficientes, de uma gama de origens estruturadas e não estruturadas, em Streaming ou Batches.
* Projetar, implementar e otimizar lakehouses, bancos de dados e data warehouses.
* Trabalhar em migrações de sistemas legados para sistemas modernos.
* Trabalhar com grandes volumes de dados e garantir sua disponibilidade e performance.
* Realizar assessment de ambientes analíticos.
* Colaborar com cientistas e analistas de dados para entender e suportar necessidades de dados.
* Monitorar e resolver problemas de desempenho e qualidade dos dados.