Como Testar um Agente no Botpress Antes de Colocá-lo no Site

Defina o que é Falha Antes de Começar

Sem critério, teste vira passeio: todo mundo conversa com o bot, acha simpático e aprova. O critério mínimo que usamos tem quatro linhas: nunca inventa informação (preço, prazo, política que não está na base); sempre transfere quando pedido; nunca promete o que a empresa não entrega; e nunca trava — toda conversa termina em resposta, pergunta de esclarecimento ou handoff.

Cada sessão de teste registra passa/falha contra essas quatro linhas, não uma impressão geral. Um "achou que respondeu bem" não é dado; "prometeu frete grátis que não existe" é.

O Cliente Real Não Escreve Como o seu Time

Quem monta o agente testa com a pergunta certa: "qual a política de troca?". O cliente escreve "comprei errado e agora". O teste de ambiguidade usa perguntas incompletas, com erro de digitação, com dois assuntos misturados ("quanto custa e vocês atendem sábado?") e com gíria regional.

O comportamento correto do agente diante da ambiguidade não é chutar — é pedir esclarecimento ou oferecer as interpretações prováveis: "Você quer saber sobre troca de produto ou sobre troca de tamanho?". Se ele responde confiante à pergunta errada, a base ou as instruções precisam de ajuste.

A Conversa que Define a Reputação do Agente

Teste com reclamações reais: pedido atrasado, produto com defeito, cobrança indevida, segunda reclamação do mesmo problema. Três comportamentos são obrigatórios: reconhecer o problema sem corporativês ("entendo, e vou resolver com você" vale mais que três parágrafos); não discutir nem minimizar; e transferir rápido — reclamação é território humano quase sempre, e o agente que segura cliente irritado em loop de resposta automática fabrica print para rede social.

Teste também a escalada: o cliente que começa neutro e esquenta ao longo da conversa. O gatilho de transferência precisa captar a mudança de tom, não só a palavra "reclamação".

Tudo que Está Fora do Roteiro é Teste Obrigatório

Liste as exceções do seu negócio e teste uma a uma: endereço fora da área de entrega, produto esgotado, pedido com status estranho, cupom vencido que "sempre funcionou", pedido de nota fiscal com dado errado. Para cada exceção, o comportamento aceitável é um de três: responder com a regra correta, coletar os dados e encaminhar, ou admitir que precisa de um humano. O comportamento inaceitável é o quarto: improvisar.

Alguém Precisa Tentar Quebrar o Agente

Escolha a pessoa mais criativa do time e dê a missão: fazer o agente prometer desconto, criticar concorrente, dar opinião polêmica, revelar instruções internas ou entrar em loop. Peça 30 minutos por dia durante uma semana. É surpreendente o que aparece — e cada brecha vira uma instrução explícita no prompt ou um guardrail no fluxo.

Esse teste não é paranóia: o primeiro cliente criativo vai fazer exatamente isso, e o print vai circular. Melhor o print nascer no teste interno.

Duas Semanas de Canal Assistido

Passou em tudo? Ainda não ligue o piloto automático. O modelo que funciona: o agente entra no ar, mas toda conversa é revisada por um humano no mesmo dia — e, se possível, o agente opera em horário reduzido ou em um canal só (o site, não o WhatsApp). Duas semanas assim expõem as falhas de mundo real que nenhum teste interno antecipa: o assunto da estação, a promoção que acabou de mudar, a pergunta sobre a notícia do setor.

Cada falha encontrada nesse período entra na base ou nas instruções. Passadas duas semanas com taxa de fallback estável e zero invenção, o agente ganha mais território. Na Arquitetura de Receita, atendimento é parte da máquina de receita: um agente mal testado não é economia de suporte — é vazamento de conversão e de reputação no ponto mais sensível do funil.