Objetivo:
A Invillia está em busca de um Engenheiro de Dados Sênior para atuar na construção e evolução da plataforma de Feature Store, solução interna que acelera o desenvolvimento de modelos de machine learning e inteligência artificial.
* Desenvolver pipelines escaláveis e de alta performance;
* Projetar soluções com foco em modularização, versionamento e reuso;
* Criar e manter frameworks internos para automação de processos;
* Implementar mecanismos de validação e monitoramento de dados;
* Apoiar a evolução contínua da plataforma de dados;
Requisitos e habilidades técnicas:
* Experiência sólida com Spark (PySpark) e processamento distribuído;
* Domínio de AWS (S3, EMR, Glue, Lambda, Step Functions, Redshift);
* Prática com Terraform e conceitos de infraestrutura como código;
* Conhecimento em CI/CD com uso de Git e Jenkins;
* Vivência com frameworks de Data Quality ou validações customizadas;
* Conhecimento em engenharia de software (boas práticas, testes, modularização).
Diferenciais:
* Experiência com automação de pipelines de dados e projetos de MLOps/Feature Store;
* Experiência com projetos de IA generativa, especialmente com RAG.