Métricas de automação: os números que eu olho toda semana
Quais números do bot merecem atenção semanal, quais enganam e como transformar leitura de métrica em correção concreta no fluxo.
Apresentei um número numa reunião com muito orgulho: 82% das conversas resolvidas pelo bot. Duas semanas depois descobri que boa parte daquelas conversas "resolvidas" era gente que tinha desistido no meio e nunca mais voltou. O bot não resolveu nada. Ele só ficou sem resposta. Foi assim que eu passei a olhar métricas de automação com outro olho.
Indicador de automação engana com facilidade porque ausência de reclamação parece sucesso. Cliente frustrado raramente reclama. Ele só some, e sumir não aparece em nenhuma coluna de erro.
Vou listar os números que eu abro toda semana, os que aprendi a desconfiar e o que fazer com cada leitura. Se você ainda não publicou nada, o contexto está em como criar seu primeiro fluxo.
As métricas de automação que mudam decisão
O motor registra métricas do bot conforme as conversas acontecem. De tudo que dá para olhar, quatro leituras respondem por quase toda correção que eu já fiz num fluxo.
| Métrica | O que ela revela | O que eu faço com ela |
|---|---|---|
| Abandono por nó | Onde as pessoas param de responder | Reescrevo a pergunta ou encurto o menu daquele ponto |
| Taxa de resposta inválida | Perguntas que o cliente não entende | Troco o texto ou aceito mais variações na Condição |
| Volume de transferência | Assunto que o bot não deveria tentar | Reduzo escopo ou melhoro a rota de escape |
| Retorno no mesmo dia | Atendimento que não fechou o assunto | Reviso a passagem de contexto para o humano |
O abandono por nó é o meu favorito porque ele aponta o dedo. Não diz que o fluxo está ruim, diz que a terceira pergunta está ruim. Isso transforma discussão em tarefa.
Os números que enganam
Taxa de resolução pelo bot sozinha é a armadilha em que eu caí. Ela sobe quando o cliente desiste e some, exatamente o cenário que você mais quer evitar. Sempre leia junto com o abandono, ou você vai comemorar a coisa errada.
- Quantidade de conversas atendidas: cresce com volume, não com qualidade
- Tempo médio de conversa: cai quando o cliente desiste rápido
- Total de mensagens enviadas: sobe quando o fluxo está repetitivo
- Taxa de resolução isolada: confunde desistência com sucesso
Não estou dizendo para ignorar esses números. Estou dizendo para nunca olhar nenhum deles sozinho. Todo indicador de automação precisa de um par que puxe para o outro lado.
A rotina semanal que funciona aqui
- Abra o abandono por nóOrdene do maior para o menor e escolha um único nó para atacar na semana.
- Leia as conversas daquele nóDe dez a quinze bastam para o padrão aparecer. Anote as palavras que o cliente usou.
- Faça uma alteração sóUma por semana. Duas ao mesmo tempo e você não sabe qual delas funcionou.
- Compare na semana seguinteMesmo nó, mesmo indicador. Se não melhorou, o problema era outro.
- Registre o que aprendeuVire item de checklist para não repetir o mesmo desenho no próximo fluxo.
Confesso que demorei para aceitar a regra de uma alteração por semana. Parece lento. Só que mexer em cinco pontos de uma vez me deixou sem saber o que tinha funcionado por meses.
Ligando o número à correção
Métrica que não vira tarefa é entretenimento. Cada leitura tem um destino previsível: abandono alto num menu leva a menu mais curto, resposta inválida leva a texto mais claro ou Condição mais generosa, transferência alta leva a escopo menor.
Os defeitos que aparecem nesse trabalho estão catalogados em erros comuns em fluxos de chatbot, com a correção de cada um. E quando o número aponta que o assunto simplesmente não é do bot, o caminho é o transbordo para humano.
Comparando com o que acontece depois
O bot não vive sozinho. Uma automação que transfere pouco mas gera fila enorme no time humano não está indo bem, ela só empurrou o problema. Cruze os números do bot com o tempo de espera da fila de atendimento no WhatsApp antes de comemorar.
A mesma lógica vale para o outro extremo: automação que resolve muito mas gera retorno no dia seguinte pela mesma dúvida está entregando resposta incompleta. Contar o retorno é chato e é justamente por isso que quase ninguém conta.
Um último cuidado com comparação entre períodos. Volume de mensagem varia com campanha, sazonalidade e até com feriado no meio da semana. Comparar a segunda-feira depois de um disparo com uma segunda-feira normal produz conclusão errada, e eu já tomei decisão de desenho baseada nesse tipo de leitura torta. Compare períodos parecidos ou anote o que aconteceu de diferente naquele intervalo.
Escolha um nó e comece
Abra hoje o abandono por nó do fluxo de maior volume, escolha o pior ponto e leia dez conversas dele. Você vai sair dessa meia hora com uma correção concreta na mão, e ela vai valer mais do que qualquer painel colorido.