[Hiring] Senior QA in AI Testing | LLMs and Prompt @Iventis

Role Description

Buscamos um(a) profissional focado(a) em Qualidade e Confiabilidade de soluções baseadas em Inteligência Artificial, responsável por validar, testar e avaliar agentes de IA e aplicações com LLMs em ambiente de produção. Essa não é uma vaga tradicional de QA funcional. Procuramos alguém com olhar crítico para comportamento de modelos de IA, capaz de avaliar coerência, contexto, confiabilidade, consistência e segurança das respostas geradas por agentes inteligentes. A pessoa atuará diretamente na evolução de agentes de IA, ajudando a garantir experiências mais precisas, úteis e confiáveis para usuários reais.

Qualifications

• Experiência com testes de sistemas, validação de aplicações ou qualidade digital
• Experiência com avaliação de modelos de IA generativa (LLMs)
• Familiaridade com agentes de IA, copilots ou automações inteligentes
• Capaz de testar agentes de IA em cenários reais e complexos
• Facilidade para identificar inconsistências, falhas e comportamentos inesperados
• Organização para estruturar cenários e estratégias de teste
• Boa comunicação para documentar análises e feedbacks

Requirements

• Conhecimento em Prompt Engineering
• Experiência com produtos digitais em produção
• Vivência com análise de dados ou métricas de qualidade
• Experiência com automação de testes
• Conhecimento em AI Evaluation, AI Safety ou AI Reliability
• Forte capacidade analítica e pensamento crítico
• Excelente atenção aos detalhes

Benefits

• Modelo de atuação: Home Office Full Time
• Contratação: PJ via Iventis

Company Description

Buscamos uma pessoa que:

• Questione respostas e comportamentos da IA
• Tenha pensamento crítico e investigativo
• Seja detalhista e orientada à qualidade
• Consiga avaliar nuances semânticas e contextuais
• Tenha mentalidade de melhoria contínua
• Entenda que testar IA vai além de validar fluxos funcionais