Bolsista Graduado em Ciência da Computação, Eng da Computação, Sistemas de Informação e afins - RP 17371 - SENAI
Join to apply for the Bolsista Graduado em Ciência da Computação, Eng da Computação, Sistemas de Informação e afins - RP 17371 - SENAI role at IEL Paraná
Atuar no desenvolvimento de soluções para ingestão e tratamento de dados no ambiente Databricks, com garantia de governança, qualidade, segurança e eficiência operacional.
Atividades a Serem Desenvolvidas
* Migrar pipelines de dados de SQL Server (Integration Services) e Python para Databricks;
* Desenvolver processos de ingestão, transformação, garantia de qualidade e disponibilização de dados utilizando Databricks e Delta Lake;
* Implementar boas práticas de governança, segurança, qualidade e compliance de dados com o Databricks;
* Desenvolver e sustentar fluxos ETL/ELT utilizando serviços do Databricks;
* Documentar pipelines e soluções desenvolvidas;
* Apoiar equipes de negócio no entendimento de requisitos e tradução para soluções em Databrick
Requisitos
* Experiência com engenharia de dados;
* Domínio de SQL avançado (consultas, procedures, modelagem etc.) com experiência comprovada;
* Domínio de Python aplicado ao tratamento e manipulação de dados;
* Experiência prática com Databricks (notebooks, workflows, Delta Lake, Unity etc.);
* Experiência em governança e segurança de dados em ambiente de nuvem.
Desejáveis (diferencial)
* Conhecimento em soluções SQL Server Integration Services (SSIS);
* Experiência com Spark/PySpark;
* Conhecimento em Azure Data Lake ou outras soluções de big data;
* Experiência com ferramentas de orquestração (Airflow, Azure Data Factory etc.);
* Certificações Databricks.
São José dos Pinhais, Paraná, Brazil
#J-18808-Ljbffr