KPIs de chatbot: definições, fórmulas e experiência

Meça resolução, contenção, CSAT, latência e transferências com fórmulas claras de chatbot, sem tratar silêncio como sucesso.

Cover Image for KPIs de chatbot: definições, fórmulas e experiência

KPIs de chatbot são métricas ligadas a um objetivo, como resolver uma solicitação ou gerar um lead qualificado. Volume de mensagens é uma métrica; resolução confirmada em relação a uma meta é um KPI. Defina quais conversas entram no cálculo e qual evidência comprova o resultado.

Para suporte, comece com resolução confirmada, resultados desconhecidos e transferências concluídas. Para experiência do usuário, acrescente satisfação, participação em pesquisas e latência. Uma conversa sem intervenção humana não significa necessariamente um problema resolvido.

Definições e fórmulas

Esta é uma convenção de medição proposta, não um padrão universal dos fornecedores. Inclua conversas reais do caso de uso e período escolhidos. Exclua testes e spam com uma regra documentada. Separe conversas abertas até encerrar sua janela de observação. Multiplique cada fração por 100. Denominador zero significa indisponível, não 0%.

KPIFórmulaInformação complementar
Resolução confirmadaConversas resolvidas pelo bot com confirmação / conversas elegíveisMétodo de confirmação e resultados desconhecidos
ContençãoConversas sem escalonamento humano registrado / conversas elegíveisCobertura do registro e casos não resolvidos
Solicitação de transferênciaConversas que pedem ajuda humana / conversas elegíveisSolicitações, falhas e aceitações separadas
Transferência concluídaTransferências aceitas por pessoa ou fila de destino / transferências solicitadasEvidência de aceitação, não de resolução
CSATAvaliações positivas / avaliações válidas recebidasEscala, limite positivo e número de respostas
Participação na pesquisaRespostas válidas / conversas às quais a pesquisa foi oferecidaRepresentatividade dos participantes
FallbackTurnos do visitante com fallback definido / turnos elegíveis do visitanteRecusas, informação ausente e erros separados
EngajamentoSessões do widget com mensagem do visitante / sessões observadas de abertura do widgetMesma definição de sessão
Conversão de leadsConversas comerciais com lead qualificado deduplicado / conversas comerciais elegíveisRegra de qualificação e venda posterior
Resultado desconhecido sem escalonamentoConversas não escalonadas sem evidência suficiente do resultado / conversas elegíveisFalta de acompanhamento e possíveis abandonos

Use uma planilha de KPI que possa verificar

Baixe a planilha CSV de KPI em branco, em inglês e abra-a num programa de planilhas. Cada linha identifica o numerador, o denominador e as evidências necessárias. Preencha as contagens, o período do relatório e uma decisão. O CSV não calcula resultados automaticamente nem se conecta ao chatbot.

Escolha um caso de uso e espere o fim da janela de observação antes de contar. Para taxas baseadas em conversas, mantenha uma planilha privada de revisão com uma linha por conversa elegível, as evidências do resultado e o estado da transferência. Conte cada conversa uma vez em cada taxa aplicável baseada em conversas. Mantenha registros separados de interações, sessões e avaliações para fallback, engajamento e CSAT, usando o denominador indicado em cada linha. Duas interações com fallback em dez interações elegíveis dos visitantes equivalem a 20 %, independentemente de quantas conversas as contenham. A planilha armazena contagens agregadas; não cole mensagens dos visitantes nem dados pessoais.

Para cada porcentagem, divida o numerador registrado pelo denominador e multiplique por 100. Uma contagem em branco significa desconhecida. Um denominador zero significa indisponível. Se a configuração não registra ofertas de pesquisa ou aceitação de transferências, deixe essas taxas indisponíveis e indique as evidências que faltam. Não deduza esses eventos do encerramento de uma conversa.

Use o resultado para escolher uma correção concreta. Por exemplo, examine resultados desconhecidos em busca de fontes ausentes antes de decidir se altera as respostas. O guia de otimização de chatbots explica como transformar essa revisão em mudanças nas fontes. A planilha funciona com registros manuais e não implica que Agentkit reporte automaticamente todos esses eventos.

Resolução, contenção e contatos evitados

Confirme a resolução com uma resposta explícita sobre o problema, um resultado de tarefa verificado ou uma revisão documentada da conversa. Uma avaliação positiva do tom não basta. Apresente sucesso inferido separadamente.

Silêncio, fechar o widget ou não voltar por um dia podem indicar sucesso, interrupção ou desistência. Sem evidência, o resultado é desconhecido. Acompanhe novos contatos sobre o mesmo problema em uma janela declarada, quando permitido e observável. Informe os canais que não consegue acompanhar.

Contenção pode incluir problemas não resolvidos. Deflexão estima contatos humanos evitados em comparação com o que aconteceria sem o bot. Exige taxas comparáveis, idealmente um grupo de controle adequado. Tráfego e composição das perguntas podem alterar comparações antes/depois. Nenhuma dessas taxas mede diretamente horas de trabalho economizadas.

Exemplo com 100 conversas

Este exemplo é hipotético, não um resultado de clientes Agentkit nem um benchmark. Ao encerrar a janela, há 45 resoluções confirmadas sem escalonamento, 20 pedidos de transferência e 35 conversas sem escalonamento ou confirmação confiável. Das transferências, 15 foram aceitas e 5 falharam.

Nesta convenção, todas as 20 solicitações de transferência registradas contam como escalonamentos, incluindo as 5 transferências que falharam. A taxa de resultados desconhecidos sem escalonamento exclui essas solicitações; sua resolução final exige acompanhamento separado.

Resolução confirmada: 45/100 = 45%. Contenção: 80/100 = 80%. Resultados desconhecidos sem escalonamento: 35/100 = 35%. Os resultados dos casos escalonados precisam de acompanhamento separado. Transferências concluídas: 15/20 = 75%, sem comprovar a solução daqueles problemas.

Se todos os 100 recebem uma pesquisa e 10 respondem, com 8 avaliações positivas, CSAT é 8/10 = 80% e participação 10/100 = 10%. Isso não demonstra satisfação de 80% de todos os visitantes. Contatos evitados e tempo economizado permanecem desconhecidos.

Quais KPIs medem a experiência do usuário?

Combine CSAT e participação com resultados desconhecidos ou abandonados, latência e transferências concluídas. Uma amostra voluntária pequena pode ignorar usuários que saíram insatisfeitos. Verifique a possibilidade de avaliação também após escalonamento.

Meça a latência do envio até a primeira resposta visível ou até a resposta completa. Declare o ponto final e apresente mediana e percentil 95, junto com falhas e tempos esgotados. Uma resposta rápida, mas errada, continua falhando.

Profundidade é o total de mensagens contadas por conversa. Informe se inclui ambos os lados. Conversas longas podem ser úteis ou repetitivas; curtas podem terminar bem ou ser abandonadas. Diferencie quem volta com uma necessidade nova de contatos repetidos sobre um problema pendente.

Definir metas e melhorar

Não existe uma porcentagem universal defensável para todas essas tarefas. Compare o mesmo uso, idioma, canal e regras. Mostre numerador e denominador. Amostras pequenas e mudanças no tipo de pergunta limitam as conclusões.

Registre um período completo de referência, aplique uma correção e compare outro período completo. Separe escalonamentos necessários de falhas evitáveis. Contenção de 60% não significa 60% menos trabalho. Meça contatos humanos e tempo de atendimento separadamente.

Revise conversas resolvidas, desconhecidas, escalonadas e com fallback. O fallback pode vir de fontes ausentes, recusa apropriada ou falha técnica. Consulte otimização de chatbot e suporte ao cliente. Para leads, examine intenção, formulário e momento da oferta com a geração de leads. Preserve o acompanhamento ao combinar chatbot e chat ao vivo.

Use os registros e comentários realmente disponíveis. Este plano não significa que Agentkit calcule automaticamente cada fórmula ou associe visitantes entre canais de suporte. Se faltar um evento, marque o KPI como indisponível e especifique a instrumentação ou revisão manual necessária.

Comece com a planilha em branco, em inglês e um período completo de revisão. Se estiver avaliando Agentkit, crie um chatbot gratuito e teste um pequeno conjunto de perguntas antes de decidir quais resultados sua configuração em produção precisa medir.

Comece gratuitamenteNão é necessário cartão de crédito