Desenvolvimento de Dados com Qualidade
A Invillia busca uma pessoa engenheira de dados sênior para criar e evoluir a plataforma de Feature Store.
O trabalho inclui:
* Desenvolver pipelines escaláveis e de alta performance
* Projetar soluções com foco em modularização, versionamento e reuso
* Criar e manter frameworks internos para automação de processos
* Implementar mecanismos de validação e monitoramento de dados
* Apoiartevolução contínua da plataforma de dados
Requisitos:
* Experiência sólida com Spark (PySpark) e processamento distribuído
* Domínio de AWS (S3, EMR, Glue, Lambda, Step Functions, Redshift)
* Prática com Terraform e conceitos de infraestrutura como código
* Conhecimento em CI/CD com uso de Git e Jenkins
* Vivência com frameworks de Data Quality ou validações customizadas
* Conhecimento em engenharia de software (boas práticas, testes, modularização)