Criar Ecosistemas de Dados Inovadores
Um engenheiro de dados experiente é responsável por criar e manter processos de ingestão de dados escaláveis, garantindo a integridade, conformidade e resiliência dos dados.
Tarefas Principais:
* Desenvolvimento de Pipelines de Dados: Projetar e implementar pipelines de dados para grandes volumes de dados, garantindo a eficiência e escalabilidade.
* Otimização de Estruturas de Dados: Otimizar estruturas de dados no Data Lake/Lakehouse, orientadas à governança e que atendam às necessidades estratégicas dos times de Analytics e Negócios.
* Gestão da Qualidade e Governança: Desenvolver e manter processos de tratamento de dados, aplicando frameworks avançados de validação e garantindo a qualidade e acessibilidade dos dados.
Habilidades Requeridas:
* Estruturação de Dados: Conhecimento avançado em estruturação de dados, incluindo projetos de bases de dados relacionais e não relacionais.
* Linguagens de Programação: Experiência com linguagens como Python, Java, C++ ou SQL, além de conhecimento em framework de desenvolvimento de aplicações.
* Ferramentas de Processamento de Dados: Familiaridade com ferramentas de processamento de dados, como Apache Spark, Hadoop e MapReduce.
Vantagens do Cargo:
* Aprender Continuamente: Opportunidade de aprender sobre tecnologias emergentes e trabalhar em um ambiente dinâmico.
* Influenciar o Negócio: Participar ativamente na definição da estratégia de dados e influenciar as decisões comerciais.
* Suporte Técnico: Equipe de suporte técnico disponível 24 horas para ajudar a resolver problemas urgentes.