Resumo da Posição
Buscamos um(a) Engenheiro(a) de Dados com certificação obrigatória Databricks Certified Data Engineer Professional, para atuar no desenvolvimento de soluções de dados em Azure e Databricks. Este profissional será responsável por projetar, implementar e otimizar pipelines de dados escaláveis e de alta performance, assegurando governança, qualidade e disponibilidade das informações para análises avançadas e tomadas de decisão estratégicas.
Principais Atividades
* Projetar, desenvolver e manter pipelines de dados em Azure e Databricks, com foco em performance, escalabilidade e confiabilidade.
* Implementar e gerenciar processos ETL/ELT utilizando Azure Data Factory, Databricks e Synapse Analytics.
* Otimizar modelos de dados e fluxos de processamento para suportar análises complexas e relatórios corporativos.
* Monitorar e resolver gargalos de performance, garantindo alta disponibilidade e eficiência operacional.
* Integrar e transformar dados de múltiplas fontes, garantindo qualidade e rastreabilidade via Unity Catalog.
* Colaborar com times de BI, Analytics e Desenvolvimento, traduzindo necessidades de negócio em soluções técnicas de dados.
* Documentar arquiteturas, pipelines e boas práticas, propondo melhorias contínuas e inovações tecnológicas.
Requisitos
* Graduação em Engenharia de Dados, Ciência da Computação, Sistemas de Informação, Matemática ou áreas correlatas.
* Certificação obrigatória: Databricks Certified Data Engineer Professional.
* Experiência comprovada em engenharia de dados e manutenção de pipelines ETL/ELT.
* Domínio do ecossistema Azure: Data Factory, Databricks, Synapse Analytics, Data Lake, Event Hub/Service Bus e Microsoft Fabric.
* Conhecimentos avançados em Spark (PySpark ou Scala) e SQL.
* Experiência com bancos de dados relacionais e não relacionais (SQL Server, PostgreSQL, CosmosDB).
* Proficiência em Python para manipulação, integração e automação de dados.
* Vivência com versionamento (Git) e integração/entrega contínua (CI/CD).
* Experiência com Unity Catalog e Delta Lake.
Competências
* Capacidade analítica e técnica para lidar com grandes volumes de dados e arquiteturas distribuídas.
* Criação e manutenção de catálogos de dados corporativos no Unity Catalog.
* Proatividade na resolução de problemas complexos com soluções escaláveis e sustentáveis.
* Boa comunicação e colaboração com equipes multidisciplinares.
* Organização, atenção a detalhes e foco em resultados.
Diferenciais
* Certificações adicionais Microsoft (ex.: Azure Data Engineer Associate).
* Experiência em arquiteturas modernas de dados (Lakehouse, Data Mesh, Delta Sharing).
* Conhecimento em Power BI para validação de modelos e KPIs.
* Vivência em projetos de engenharia de dados corporativos de grande porte.