Teste a sua IA antes que o cliente teste por você.
A Qualidade da IA roda conversas simuladas contra o seu agente, dá nota, aponta o que reprovou e sugere a correção. Nada muda no seu atendimento sem a aprovação de um administrador.
- Em todos os planos, sem add-on
- Roda sozinha toda semana
- Só grava com aprovação
Teste concluído: 78% dos cenários aprovados, saúde Atenção.
21 de 27 cenários aprovados
Faixas: Bom com 90% ou mais, Atenção com 70% ou mais, Crítico abaixo disso.
Descobrir o erro da IA pela reclamação do cliente é tarde.
Você só sabia que a IA tinha errado quando um cliente reclamava: um desconto que ninguém autorizou, uma informação que não existe.
E acertar era tentativa e erro no prompt.
Toda semana, 19 cenários de comportamento e até 8 casos do seu cadastro rodam contra o seu agente. O que reprova chega com a conversa, o diagnóstico e a correção sugerida.
Você aprova, re-testa 3 vezes e vê se pegou. Dados de uma padaria de exemplo.
Testa, explica, sugere. Você decide.
Quatro passos, do teste à regra aprovada.
- 1
Conversas simuladas
19 cenários de comportamento, como cliente pedindo humano ou desconto alto, e até 8 casos de conhecimento gerados do seu cadastro.
- 2
Nota e diagnóstico
Saúde Bom, Atenção ou Crítico, dois termômetros e a lista do que revisar, com o diagnóstico em português.
- 3
Correção sugerida
Faltou informação? Vai para o Treinar IA. Problema de conduta? Vem uma regra pronta para você editar.
- 4
Você aprova
Só um administrador aplica. Depois, re-teste 3 vezes e desfaça quando quiser.
Toque numa etapa e veja um erro virar regra aprovada.
Simulação com a Bia, agente de uma padaria de exemplo, a Padaria Trigo Bom. Na sua conta, os cenários rodam contra o seu agente.
Teste concluído: 78% dos cenários aprovados, saúde Atenção.
21 de 27 cenários aprovados
Faixas: Bom com 90% ou mais, Atenção com 70% ou mais, Crítico abaixo disso.
A saúde da sua IA numa tela só.
Do resumo em uma palavra até a conversa que reprovou.
Saúde em uma palavra
Com o percentual de cenários aprovados ao lado.
- Bom90% ou mais
- Atenção70% ou mais
- Críticoabaixo de 70%
Dois termômetros
O que a IA sabe do seu negócio e como ela se comporta, medidos em separado.
Os contadores
Quantos cenários passaram, quantos ficaram pela metade e quantos reprovaram.
O histórico
O histórico mostra as últimas execuções, com tipo, data e quantos cenários passaram.
- Semanal automático
- Automático após mudança
- Manual (você)
- Re-teste de uma correção
Menos susto no atendimento. Mais controle sobre a sua IA.
Roda sozinha toda semana
E também no dia seguinte a uma mudança na base ou no prompt. Você não precisa lembrar de testar.
Ou na hora que você quiser
O botão "Executar teste agora" roda um teste manual por agente a cada 24 horas.
Diagnóstico em português
Cada item para revisar vem com a conversa testada e a explicação do que deu errado.
Dois caminhos de correção
Faltou informação vira cadastro no Treinar IA. Conduta errada vira regra sugerida, com o nível de confiança.
Prova de que pegou
Re-teste 3 vezes. A correção pegou se o cenário passar em 2 delas.
Volta atrás quando quiser
O painel Regras aprovadas guarda até 25 regras, cada uma com o botão Desfazer.
Cada negócio tem o seu cenário delicado.
Padarias e comércio
Cenário: cliente pede desconto alto.
Você vê se a IA promete o que a loja não autorizou.
Clínicas e consultórios
Cenário: cliente pede para falar com um humano.
Você confere se a IA passa a conversa para a equipe quando pedem.
Óticas
Caso de conhecimento: uma pergunta tirada do seu cadastro.
Você confere se o que a IA responde bate com o que está cadastrado.
Serviços
Cenário: cliente insatisfeito.
Você vê como a IA reage antes de um cliente real passar por isso.
O teste sugere. Quem decide é você.
Nenhuma correção entra no seu agente sem aprovação. O teste aponta e um administrador aprova.
Só administrador aplica
Supervisor acompanha a tela. Aplicar, recusar e desfazer fica com o administrador.
Correção editável
Dá para editar a regra sugerida antes de aplicar, ou recusar.
Desfazer a qualquer hora
Cada regra aprovada tem o botão Desfazer no painel Regras aprovadas.
Histórico de execuções
O histórico mostra as últimas execuções, com tipo, data e quantos cenários passaram.
Antes de você perguntar.
Está em qual plano?
Em todos os planos com acesso ativo, sem add-on. Fica no menu "Qualidade da IA".
Preciso preparar alguma coisa?
Só ter o agente publicado. Os cenários rodam contra ele.
O teste usa as conversas dos meus clientes?
O teste roda com conversas simuladas: 19 cenários de comportamento e até 8 casos de conhecimento gerados do seu cadastro.
De quanto em quanto tempo roda?
Sozinho, toda semana, e no dia seguinte quando a base ou o prompt mudam. Além disso, o botão "Executar teste agora" permite um teste manual por agente a cada 24 horas.
A correção entra sozinha no meu agente?
Não. A mudança só é gravada quando um administrador aprova. Dá para editar antes, recusar ou desfazer depois.
Como sei se a correção funcionou?
Use "Re-testar 3 vezes". Se o cenário passar em 2 das 3 tentativas, a correção pegou.
O que querem dizer Bom, Atenção e Crítico?
É a saúde do agente pelo percentual de cenários aprovados: Bom com 90% ou mais, Atenção com 70% ou mais e Crítico abaixo disso.
Quantas regras posso ter?
O painel Regras aprovadas guarda até 25 regras.
Saiba como a sua IA se sai antes do próximo cliente.
A Qualidade da IA está no menu de toda conta ZappIQ, em todos os planos, sem add-on.
Ver todas as novidades da ZappIQ