Carreira de Engenharia de Dados
Descrição do Cargo
O profissional responsável por desenvolver, manter e otimizar pipelines de dados escaláveis e confiáveis.
Responsabilidade:
* Desenvolvimento de Pipelines de Dados: Desenvolver pipelines de dados escaláveis e confiáveis para apoiar análises e tomadas de decisão em larga escala.
* Mantenimento de Dados: Manter a integridade dos dados ao longo do tempo garantindo consistência, integridade e governança dos dados em larga escala.
* Implementação de Data Care: Implementar processos de Data Care, incluindo monitoramento, limpeza, catalogação, versionamento e reconciliação de dados.
* Garantia da Qualidade dos Dados: Garantir a qualidade dos dados por meio de testes automatizados, validações e auditorias de integridade.
* Estruturação da Coleta e Consumo de Dados: Trabalhar em conjunto com times de Engenharia, Analytics e Produto para estruturar a coleta e o consumo eficiente de dados.
* Data Lineage, Data Catalog e Governança de Dados: Atuar com data lineage, data catalog e definição de políticas de governança.
* Monitoramento e Resolução de Falhas: Monitorar e resolver falhas de ingestão e transformação de dados em tempo hábil.
* Documentação Técnica: Documentar os processos técnicos em conjunto com arquitetura, processos e padrões de engenharia de dados.
Conhecimentos Técnicos Exigidos
Para atuar como Engenheiro de Dados é necessário ter conhecimento em tecnologias de engenharia de dados, incluindo ferramentas como Spark, Airflow, Hadoop e SQL. Além disso, é importante ter experiência em Data Quality Frameworks e ferramentas de observabilidade de dados.
Ao longo da carreira é esperado que o profissional desenvolva habilidades em linguagens de programação como Python ou Scala e tenha experiência com Data Governance, Data Catalog, Data Lineage.
Vantagens
No entanto, além das vantagens trabalhando com dados, podemos oferecer uma série de benefícios exclusivos para os nossos colaboradores.
* Assistência Médica: Nossa empresa oferece assistência médica completa.
* Vale Refeição e VA Flexível: Também oferecemos vale refeição e VA flexível para compensar os gastos do seu dia a dia.
* Gympass e Wellz: Temos parceria com Gympass e Wellz para ajudá-lo a se manter saudável e bem.
* Parceria com o SESC: E não esqueça que somos parceiros do SESC, oferecendo descontos em cursos técnicos e de ensino superior.
* Descontos em Restaurantes: Quem não gosta de comida? Podemos oferecer descontos em restaurantes para você aproveitar seus momentos de descanso.
* Descontos em Cursos e Idiomas: Para quem quer aprender e melhorar sua vida profissional e pessoal temos parceria para oferecer descontos em cursos técnicos e idiomas.