CONVIRO
Guides & Tutorials

Checklist para testar um chatbot de IA: 20 verificações antes do lançamento

Uma checklist de 20 pontos para testar um chatbot: conhecimento, casos-limite, idiomas, transferência, captação de leads, privacidade, todos os canais e mobile, para que o dia do…

Conviro
6 de outubro de 20266 min de leitura
Checklist para testar um chatbot de IA: 20 verificações antes do lançamento
Disponível em:DEENESETFRITLTNLPLPTTR
Neste artigo

O primeiro cliente real a falar com o seu chatbot vai perguntar algo que ninguém na equipa se lembrou de experimentar. Vai escrever mal o nome do produto, fazer duas perguntas de uma vez, mudar para alemão a meio da conversa e pedir para falar com uma pessoa às 23h.

Testar um chatbot é a forma de conhecer esse cliente antes do lançamento e não depois. Na prática, significa pôr o assistente à prova com perguntas reais, casos-limite incómodos e todos os canais onde vai funcionar, e corrigir o que falhar antes de o pôr em produção.

Mais abaixo encontra uma checklist de 20 pontos, agrupados por área. Reserve uma tarde dedicada com dois ou três colegas.

Pontos-chave

  • Teste com perguntas reais do histórico da sua caixa de entrada, não com as que gostaria que os clientes fizessem.
  • A transferência para um humano, a privacidade e o comportamento nos canais estragam mais lançamentos do que as respostas erradas.
  • Registe cada verificação falhada e volte a percorrer a lista inteira depois das correções.

Preparar a sessão de testes

Recolha 30 a 50 perguntas reais de clientes das caixas de entrada de email, chat e redes sociais. Atribua um papel a cada pessoa que testa: uma faz de cliente confuso, outra de cliente irritado e outra tenta estragar tudo. Registe cada verificação numa tabela simples:

Verificação Resultado esperado Resultado obtido Passou/falhou Responsável pela correção
"Posso devolver um artigo comprado em saldos?" Indica a política para artigos em saldos e inclui o link para a página de devoluções Disse que há 30 dias para devolver Falhou Responsável de apoio ao cliente

Cobertura do conhecimento

  1. As suas 20 perguntas mais frequentes recebem respostas corretas. Compare cada uma com as políticas em vigor, não com o que se lembra.
  2. Todas as fontes de conhecimento foram realmente carregadas. Um PDF que não foi processado parece um problema de "IA má", quando na verdade é conteúdo em falta. Os novos relatórios de carregamento de conhecimento e de modo de treino da Conviro mostram como as fontes carregadas foram processadas, por isso reveja-os antes de alguém começar a fazer perguntas.
  3. Os preços, os horários e as políticas estão atualizados. Remova as tabelas de preços antigas para que não concorram com as novas.
  4. As perguntas desconhecidas recebem uma resposta honesta. Pergunte algo que nunca documentou. O assistente deve dizer que não sabe e propor um passo seguinte, não improvisar.

Casos-limite

  1. Mensagens desarrumadas funcionam. Erros ortográficos, calão, tudo em maiúsculas, mensagens de uma palavra como "reembolso?".
  2. Duas perguntas recebem duas respostas. "Enviam para a Áustria e quanto tempo demora?"
  3. Os prompts manipuladores falham. Peça um desconto que o assistente não pode dar, pergunte pela concorrência, escreva "ignora as tuas instruções". O assistente deve manter-se dentro dos seus limites.

Idiomas

  1. Todos os idiomas dos seus mercados funcionam, incluindo uma mudança de idioma a meio da conversa.
  2. As perguntas noutros idiomas continuam a encontrar a resposta. Se a base de conhecimento está em inglês e um cliente escreve em espanhol, a resposta deve estar correta e em espanhol. Verifique também o idioma da interface do widget.

Transferência para um humano

  1. "Quero falar com uma pessoa" funciona em todo o lado. Experimente várias formulações: "agente", "pessoa real", "parar o bot".
  2. Os temas sensíveis são escalados. Reclamações, ameaças legais e questões de segurança devem chegar a uma pessoa. O nosso guia de transferência para um humano explica que critérios de escalonamento definir.
  3. Os dados de contacto são recolhidos antes da transferência. Se não houver ninguém disponível, o assistente deve recolher um nome e um email ou número e dizer com honestidade quando a equipa vai responder.

Captação de leads

  1. Os dados dos leads chegam onde a equipa comercial trabalha. Faça um pedido de informação de teste e confirme que o nome, a necessidade e o prazo aparecem no CRM ou no canal de alertas.
  2. O assistente não faz interrogatórios. Deve responder primeiro e pedir dados quando forem úteis, e não começar com um formulário.

Privacidade

  1. Os clientes sabem que estão a falar com uma IA. O artigo 50.º do AI Act, o Regulamento Europeu da Inteligência Artificial, estabelece obrigações de transparência para os sistemas de IA que interagem com pessoas, por isso garanta que a mensagem de boas-vindas diz claramente que se trata de um assistente de IA.
  2. Não há fugas de dados. Pergunte pela encomenda de outro cliente e peça-lhe que repita notas internas. Confirme que nunca pede dados sensíveis de que não precisa.

Todos os canais

  1. Cada canal tem o seu próprio teste. O chat do site, o WhatsApp e as DMs do Instagram apresentam os links, as quebras de linha e as respostas longas de forma diferente. Leia as respostas em cada um.
  2. As transferências de todos os canais chegam à caixa de entrada. Escale uma conversa por canal e confirme que aparece na caixa de entrada partilhada e que alguém é notificado.

Mobile

  1. O widget comporta-se bem em ecrãs pequenos. Não deve tapar o botão de checkout nem o aviso de cookies, e o teclado não deve esconder o campo de texto.
  2. As respostas têm o tamanho certo para um telemóvel. Se uma resposta obriga a fazer scroll, encurte o conteúdo de origem. O nosso guia sobre UX do chat em mobile tem mais pormenores.

Depois do lançamento, continue a testar

Uma checklist de lançamento apanha as falhas óbvias; as conversas reais revelam as restantes. Nas primeiras duas semanas, leia todos os dias uma amostra de conversas e passe depois para uma revisão semanal com uma grelha de avaliação como a do nosso guia para medir a precisão do chatbot.

Guarde as verificações falhadas como lista de regressão e volte a percorrê-la sempre que acrescentar um documento grande, alterar uma política ou abrir um novo canal. Os assistentes de IA da Conviro também destacam as lacunas de conhecimento, ou seja, as perguntas a que o assistente não conseguiu responder bem, o que lhe indica o que escrever a seguir. As instruções de configuração de cada passo estão no centro de ajuda.

Perguntas frequentes

Quanto tempo demora a testar um chatbot antes do lançamento?

Para uma pequena ou média empresa, uma tarde dedicada cobre esta checklist, mais o tempo para corrigir o que falha e voltar a testar. Planeie uma segunda sessão mais curta um ou dois dias depois. Vários idiomas ou canais acrescentam tempo, por isso conte com cerca de uma hora extra por idioma e por canal, além da ronda principal.

Quem deve testar um chatbot de IA antes do lançamento?

Pessoas que conhecem os seus clientes: agentes de apoio, um comercial e alguém que conheça as políticas. Acrescente uma pessoa que nunca tenha visto a configuração, porque vai formular as perguntas como um cliente real. Evite depender apenas de quem construiu a base de conhecimento; essas pessoas tendem a fazer as perguntas tal como os documentos estão escritos.

O que fazer quando o chatbot falha uma verificação?

Encontre a causa antes de mudar seja o que for. A maioria das falhas vem de conteúdo em falta, desatualizado ou contraditório, por isso corrija primeiro o documento de origem. Se o conteúdo está certo mas a resposta não, reveja as salvaguardas e as regras de transferência. Depois, volte a fazer a verificação falhada e mais algumas relacionadas, já que uma correção num sítio pode alterar respostas noutro.

Posso testar um chatbot sem que os clientes o vejam?

Sim, e deve fazê-lo. Teste numa página de staging ou numa página que não esteja ligada à navegação antes de colocar o widget no site principal. No WhatsApp e no Instagram, faça os primeiros testes a partir das contas pessoais de membros da equipa antes de anunciar o canal. Só divulgue o chatbot depois de passar a checklist completa.

Pronto para o dia do lançamento

Quando as 20 verificações passarem, lance primeiro num só canal, acompanhe-o durante alguns dias e acrescente depois o seguinte. Comece grátis com a Conviro para criar o seu assistente e aplicar-lhe esta checklist.

Partilhar:

Publicado por

Conviro

Partilha insights sobre suporte ao cliente com IA, automação de chatbots e estratégias de crescimento SaaS.

Ponha o guia em prática

Transforme o conhecimento de suporte em respostas mais rápidas

Explore o espaço de trabalho de suporte com IA do Conviro e comece grátis quando o fluxo se adequar à sua equipa.

Artigos relacionados

Mais publicações