Skip to main content
O playground diz como o seu agente responderia. O Centro de avaliação (em Configuração de IA na barra lateral) cobre o que ele realmente disse. Ele coleta as respostas que os seus agentes enviaram a clientes reais, faz a IA marcar as que merecem uma segunda olhada e o guia pela revisão. Uma sessão curta de revisão vira correções duradouras.

Rodar uma avaliação

Clique em Nova avaliação. A Ciarem varre cada resposta que os seus agentes enviaram desde a sua última avaliação, em todos os canais (WhatsApp, Instagram, Messenger e chat do site), pareando cada resposta com a mensagem do cliente que ela respondeu. Depois ela mantém apenas as respostas que merecem revisão e as agrupa em categorias nomeadas, como “Falta embasamento factual” ou “Tom frio demais”, escritas no idioma principal do seu espaço de trabalho. Dois desfechos não exigem nada de você. Se os seus agentes não enviaram nada desde a última rodada, você vê “Sem respostas novas”. Se tudo o que foi analisado parecer bem, a avaliação termina sem nada marcado. O Centro de avaliação: histórico de avaliações com respostas avaliadas, adequadas versus corrigidas e categorias por rodada

Revisar categoria por categoria

Uma avaliação preparada guia você pelas categorias um passo de cada vez (“1 de 3”). Cada passo mostra as trocas reais, com a mensagem do contato ao lado da resposta que o seu agente gerou, e pede um único veredito sobre a categoria:
  • Respostas adequadas: essas respostas estão certas. Passe para a próxima categoria.
  • Precisam de correção: algo deve mudar. Você então diz o quê, de uma de duas formas:
    • Melhorar resposta: descreva em linguagem simples como o agente deveria ter respondido (“não confirme cobertura de cirurgias, só o plano Premium inclui cirurgias menores”). A Ciarem incorpora essa instrução ao comportamento aprendido do agente. Se a sua descrição contiver um fato do negócio (um preço, uma área de cobertura, uma política), a Ciarem avisa e leva você à base de conhecimento. Fatos são respondidos a partir dela, não aprendidos como comportamento.
    • Deve transferir: esse momento pertencia a uma pessoa. A Ciarem cria uma regra de transferência real a partir da sua descrição, para que da próxima vez a conversa chegue a uma pessoa.
Cada correção também deixa um teste automático, então a Ciarem continua verificando que o ajuste se mantém à medida que a sua configuração evolui. Revisando uma categoria: a mensagem do contato ao lado da resposta gerada, com os vereditos Respostas adequadas e Precisam de correção

O histórico de avaliações

A página inicial do Centro de avaliação é um histórico de cada rodada: quando rodou, quantas respostas foram avaliadas, a divisão entre Adequadas e Corrigidas, quantas categorias você revisou e o status. Abra qualquer rodada com Ver resultados para revisitar o que foi marcado e o que você decidiu. Com o tempo, essa tabela é a sua tendência de qualidade. Uma porcentagem de adequadas que sobe significa que o seu agente está melhorando.

Correções também a partir do playground

Você não precisa esperar por uma revisão em lote. No playground, cada resposta analisada traz as ações Boa resposta / Precisa de correção, e uma correção abre o mesmo diálogo de dois caminhos: melhorar a resposta ou transformar o momento em uma regra de transferência. Consulte O playground.

Quando rodar

Rode uma avaliação depois dos seus primeiros dias no ar e, depois, sempre que algo relevante mudar: preços novos, um novo agente na equipe, uma campanha que traz um novo tipo de cliente. Revisar algumas categorias por semana é mais rápido do que ler cada conversa.