Buscamos um Engenheiro de Dados para Construir a Futuro da Energia
Estamos buscando um profissional talentoso para ocupar o cargo de Engenheiro de Dados. Você será responsável por criar soluções inovadoras em grandes volumes de dados e contribuir com projetos de impacto global na área de energia e sustentabilidade.
* Responsabilidades:
o Desenvolver pipelines de dados escaláveis utilizando Apache Hadoop, Spark e Kafka
o Implementar processos de ETL e integração de dados de múltiplas fontes (internas e externas)
o Trabalhar com grandes volumes de dados estruturados e não estruturados para habilitar análises em escala
o Otimizar e ajustar jobs Spark e Hadoop para melhor performance
o Atuar com CDP (Cloudera Data Platform) para deploy e gerenciamento de aplicações Big Data
o Integrar soluções com Azure, Snowflake e infraestrutura on-premises
o Colaborar com cientistas de dados, analistas, arquitetos e stakeholders para entender requisitos e entregar soluções robustas
o Utilizar ferramentas de versionamento como GitHub e automações via GitHub Actions e/ou Azure DevOps
o Explorar e implementar novas tecnologias de acordo com o roadmap interno de Big Data
o Garantir segurança, integridade e governança dos dados
Requisitos Técnicos
* Formação: Bacharelado em Ciência da Computação ou áreas correlatas | GPA mínimo: 6.5/10
* Experiência: 5 a 8+ anos em TI, com pelo menos 3 anos em ambientes Hadoop
* Linguagens: Scala, Java e/ou Python
* Frameworks e Ferramentas:
o Apache Spark, Hadoop Ecosystem
o Hive, Iceberg, HBase
o Solr
o Kafka, Spark Streaming ou Apache Flink
o Oozie (Airflow é diferencial)
o Sistemas UNIX/Linux
o Git, GitHub, DevOps (desejável Azure DevOps)
o Cloud: Experiência com Azure (desejável conhecimento em AWS)
Diferenciais
* Conhecimento em Apache NiFi
* Habilidades de modelagem de dados
* Experiência prévia no setor de energia (Oil & Gas)
Se você compartilha desses valores e tem as habilidades necessárias, este é seu lugar! Estamos ansiosos para conhecer sua proposta!