Desejamos um Profissional de Dados Inovador
A equipe busca por alguém com experiência em ETL, focado na automação e desempenho nos processos de grande volume. O profissional ideal deve ter conhecimento avançado de SQL para manipulação e integração complexa de dados.
Familiaridade com Power BI, Tableau e Azure é uma boa vantagem. Além disso, é fundamental ter habilidades em linguagens como Python, R e experiência com tecnologias como Spark, PySpark ou Scala no Databricks.
Caso tenha experiência em mensageria (Kafka, Service Bus), consideraremos um grande ativo para a nossa equipe.
Requisitos:
* Tecnologia: Spark, PySpark, Scala, Databricks, SQL;
* Linguagens: Python, R;
* Sistema Operacional: Windows, Linux;
Responsabilidades:
o Criar e otimizar jobs em Spark para ingestão, limpeza, padronização e enriquecimento de dados provenientes de múltiplas fontes;
o Modelar, integrar e transformar dados complexos utilizando SQL avançado, assegurando qualidade e disponibilidade para áreas de negócio e analytics;
o Monitorar, documentar e otimizar a infraestrutura de dados, garantindo governança, escalabilidade, segurança e alto desempenho em ambientes de nuvem e plataformas como Databricks;
o