Jornada Profissional: Engenheiro de Dados
Estamos buscando um profissional experiente para atuar como Engenheiro de Dados em uma equipe dinâmica e inovadora. Aqui, você trabalhará no desenvolvimento de pipelines de dados escaláveis e soluções inovadoras em ambientes híbridos, utilizando tecnologias como Hadoop, Spark, Azure e Snowflake.
Responsabilidades:
* Desenvolvimento de Pipelines de Dados: Projetar, desenvolver e manter pipelines de dados escaláveis utilizando Apache Hadoop, Spark e Kafka.
* Integração de Dados: Implementar processos de ETL e integração de dados de múltiplas fontes (internas e externas).
* Análise de Dados: Trabalhar com grandes volumes de dados estruturados e não estruturados para habilitar análises em escala.
* Otimização de Performance: Otimizar e ajustar jobs Spark e Hadoop para melhor performance.
* Gerenciamento de Aplicativos Big Data: Atuar com CDP (Cloudera Data Platform) para deploy e gerenciamento de aplicações Big Data.
*
* Desenvolvimento de Software: Utilizar ferramentas de versionamento como GitHub e automações via GitHub Actions e/ou Azure DevOps.
* Inovação Tecnológica: Explorar e implementar novas tecnologias de acordo com o roadmap interno de Big Data.
* Gestão de Segurança e Governança: Garantir segurança, integridade e governança dos dados.
Habilidades e Qualificações:
* Formação Acadêmica: Bacharelado em Ciência da Computação ou áreas correlatas, com GPA mínimo 6.5/10.
* Experiência Profissional: 5 a 8 anos em TI, com pelo menos 3 anos em ambientes Hadoop.
* Linguagens Programáticas: Scala, Java e/ou Python.
* Ferramentas e Frameworks: Apache Spark, Hadoop Ecosystem, Hive, Iceberg, HBase, Solr, Kafka, Spark Streaming ou Apache Flink, Oozie, Git, GitHub, DevOps.
* Conhecimentos Especiais: Conhecimento em Apache NiFi, habilidades de modelagem de dados, experiência prévia no setor de energia (Oil & Gas).
Bem-Estar no Trabalho:
* Comunicação Eficaz: Excelente comunicação verbal e escrita (Inglês avançado é mandatório).
* Cultura Organizacional: Perfil proativo, autônomo e colaborativo.
* Habilidades Analíticas: Forte capacidade analítica e de resolução de problemas complexos.
* Habilidades Interpessoais: Facilidade para trabalhar em times ágeis (Scrum) e ambientes multifuncionais.