A função de Data Engineer é crucial para garantir a qualidade e confiabilidade dos dados em nossa empresa.
Responsável por desenvolver, manter e otimizar pipelines de dados escaláveis, o profissional desse cargo trabalhará com foco na integridade e governança dos dados.
Responsabilidades:
* Desenvolver e otimizar pipelines de dados para garantir a qualidade e consistência dos dados;
* Implementar processos de Data Care, incluindo monitoramento, limpeza, catalogação e reconciliação de dados;
* Garantir a qualidade dos dados por meio de testes automatizados e validações;
* Trabalhar em conjunto com times de Engenharia e Analytics para estruturar a coleta e o consumo eficiente de dados;
* Atuar com data lineage e definição de políticas de governança;
* Monitorar e resolver falhas de ingestão e transformação de dados em tempo hábil;
* Documentar os processos técnicos em conjunto com arquitetura e padrões de engenharia de dados;
Conhecimento Técnico Requerido:
* Experiência robusta em Data Care, garantindo a qualidade e integridade dos dados;
* Experiência sólida com ferramentas de engenharia de dados: Spark, Airflow, Hadoop;
* Forte conhecimento em SQL e linguagens como Python ou Scala;
* Vivência com Data Quality Frameworks e ferramentas de observabilidade de dados;
* Experiência com Data Governance e Data Catalog;
Benefícios:
* Assistência médica;
* VR e VA flexível;
* Gympass e Wellz;
* Parceria com o SESC;
* Descontos em restaurantes;
* Descontos em cursos técnicos e de ensino superior;
* Descontos em escolas e plataformas de idiomas.