QA de IA (AI Quality & Evaluation Engineer)

Sobre a vaga

Buscamos um profissional focado em qualidade de soluções de Inteligência Artificial, responsável por

validar, testar e garantir a consistência de agentes de IA em produção.

Essa posição é voltada para alguém com perfil analítico e crítico, capaz de avaliar não apenas aspectos

técnicos, mas também a qualidade semântica das respostas dos modelos.

Importante: buscamos profissionais com experiência prática em testes de sistemas ou validação de

soluções digitais. Perfis sem capacidade analítica ou foco em qualidade não serão considerados.

Responsabilidades

• Testar agentes de IA em diferentes cenários reais

• Validar qualidade, consistência e coerência das respostas

• Identificar falhas, alucinações e comportamentos inconsistentes

• Criar cenários de teste e casos de uso reais

• Definir critérios de qualidade para respostas dos modelos

• Apoiar na evolução contínua das soluções com feedback estruturado

• Trabalhar em conjunto com AI Engineers para ajustes e melhorias

• Garantir confiabilidade das soluções em ambiente de produção

Stack Esperada /