Descrição da vaga
Você é movido(a) por tecnologia, dados e inovação? 🚀
Na Triggo.Ai, transformamos desafios complexos em soluções inteligentes. Somos uma empresa brasileira focada em Analytics, IA e transformação digital, ajudando organizações a tomar decisões mais estratégicas e gerar impacto real nos negócios.
Trabalhamos com diferentes setores do mercado, sempre combinando tecnologia de ponta, visão de negócio e execução ágil.
Se você quer construir soluções que fazem a diferença e crescer junto com um time de alta performance, seu lugar pode ser aqui.
👉 Vem para a Triggo.Ai e construa o futuro com a gente.
Responsabilidades e atribuições
* Projetar e implementar frameworks de avaliação e testes para sistemas de IA (LLMs, RAG, agentes);
* Criar métricas de qualidade, benchmarks e datasets de validação para modelos em produção;
* Automatizar pipelines de QA integrados ao ciclo de desenvolvimento (CI/CD);
* Identificar e documentar falhas, alucinações e regressões de comportamento em modelos;
* Colaborar com times de engenharia e produto para definir critérios de aceitação de features de IA;
* Monitorar a qualidade dos sistemas em produção e propor melhorias contínuas.
Requisitos e qualificações
* Experiência com Python e bibliotecas do ecossistema de IA/ML (LangChain, LlamaIndex, Hugging Face ou similares);
* Vivência prática em testes e avaliação de sistemas baseados em LLMs;
* Conhecimentos básicos de engenharia de software (versionamento, testes unitários, APIs REST);
* Familiaridade com conceitos de prompting, RAG e orquestração de agentes;
* Experiência comserviços AWS (Lambda, S3, SageMaker, Bedrock);
* Conhecimento emferramentas de observabilidade e monitoramento de modelos;
* Experiência comframeworks de avaliação como Ragas, DeepEval ou similares.
#J-18808-Ljbffr