Como avaliar a qualidade do seu atendimento por IA: uma rotina mensal

Passou uma tarde a configurar uma recepcionista de IA, testou-a duas vezes, reencaminhou o número e seguiu com a sua vida. Fez bem. O erro é pensar que o trabalho ficou feito. Um assistente telefónico vai-se desviando — não porque avaria, mas porque o negócio muda e o perfil não. Esta é a rotina que o mantém honesto.

Porque é que o «configurar e esquecer» falha em silêncio

O software que se instala uma vez tende a ficar como o deixou. Uma recepcionista — humana ou de IA — não tem esse luxo, porque aquilo sobre que fala está sempre a mexer-se. Passa a abrir ao sábado. Deixa de fazer um serviço. Os preços sobem na primavera. O atraso de um fornecedor altera o prazo habitual. Nada disto chega ao assistente a não ser que lho diga, e ele continua a responder com a confiança de quem está a ler o guião do ano passado.

A falha raramente é dramática. Não é que o assistente comece de repente a dizer disparates. É que indica um preço antigo, marca pessoas para um horário que já não pratica ou desconhece um serviço novo que anda a tentar vender. Cada uma destas coisas é uma fuga pequena e invisível. Como nunca ouve a chamada, também nunca dá por ela — até que um cliente comenta, ou até que se interroga porque é que as marcações do tratamento novo são tão poucas.

Por isso, o controlo de qualidade não serve para apanhar uma máquina a portar-se mal. Serve para apanhar a distância entre aquilo que o seu negócio faz hoje e aquilo que o assistente julga que ele faz. Essa distância abre-se devagar e fecha-se em cerca de vinte minutos por mês. Este guia são esses vinte minutos.

A rotina mensal num relance

Aqui fica tudo, antes de entrarmos em pormenor em cada parte. É propositadamente pequena. Uma rotina de qualidade que cumpre mesmo vale mais do que uma exaustiva que abandona ao segundo mês.

1. 1
   Faça três chamadas-mistério

   Ligue para a sua própria linha como se fosse um cliente com uma dúvida a sério. Mude de cenário todos os meses. Oiça como um estranho, não como o dono.
2. 2
   Tire uma amostra de cinco transcrições

   Abra os resumos das chamadas, escolha cinco chamadas recentes ao acaso e pontue-as com uma grelha curta. Já as tem — o assistente envia-as por email depois de cada chamada.
3. 3
   Conte as correções

   Anote quantas vezes teve de corrigir ou pedir desculpa por alguma coisa que o assistente disse. Siga esse número de mês para mês. Uma tendência a subir é a sua luz de aviso.
4. 4
   Decida: reconfigurar ou escalar

   A maioria dos problemas está no seu perfil, não no assistente. Separe o que consegue resolver sozinho daquilo, mais raro, que vale a pena levar ao apoio ao cliente.

Vinte minutos, uma vez por mês, de preferência no mesmo dia em que trata de outra papelada, para que o hábito pegue. Agora, os pormenores.

Passo um: a chamada-mistério

A coisa mais útil que pode fazer é ligar para o seu próprio negócio como ligaria um cliente. Não para confirmar que o telefone toca — para ouvir o que uma pessoa real ouve. Os donos são péssimos testadores por natureza, porque fazem as perguntas que já sabem que o assistente responde. Uma chamada-mistério é fazer de propósito as perguntas incómodas.

Escolha um cenário antes de marcar o número e torne-o específico. Não «têm vagas para marcação», mas «parti um dente esta manhã, alguém me pode ver antes do fim de semana?». Não «qual é o horário», mas «estão abertos na segunda-feira do feriado?». O valor está nas margens, porque é nas margens que o perfil é fino.

• Quem liga com urgência: alguém com um problema que precisa de uma resposta rápida e com calor humano. O assistente tranquiliza e encaminha, ou recita horários como um robô?
• Quem anda a comparar preços: «mais ou menos quanto custa X?». Indica um valor atual, dá um intervalo honesto, ou promete um número que já não cobra?
• A pergunta fora da carta: algo que não faz. Diz isso com clareza e sugere o mais próximo que tem, ou finge que sabe?
• A marcação: tente mesmo marcar e confirme depois que a marcação aparece onde devia. Uma marcação que nunca lhe chega é pior do que uma chamada perdida.

Vá rodando o cenário de mês para mês, para não estar sempre a testar o mesmo caminho fácil. Mantenha a chamada curta — está a fazer uma amostragem, não uma auditoria. E, sobretudo, escreva uma frase honesta mal desligue: eu teria marcado, ou teria desligado e ligado para o sítio seguinte? Esse instinto é mais fiável do que qualquer pontuação que atribua depois.

Passo dois: amostragem de transcrições com uma grelha

As chamadas-mistério dizem-lhe como o assistente lida com aquilo que você lhe atira. A amostragem de transcrições diz-lhe como lidou com o que os clientes perguntaram de verdade — que é sempre mais estranho e mais variado do que qualquer coisa que inventasse. A Vunoon envia-lhe por email um resumo e a transcrição completa depois de cada chamada, portanto a matéria-prima já está na sua caixa de entrada. A disciplina está em ler mesmo algumas.

Não as leia todas — é assim que o controlo de qualidade morre. Escolha cinco chamadas recentes mais ou menos ao acaso. O acaso é importante: se só revir as chamadas que lhe soaram mal, vai concluir que o assistente é pior do que é e vai perder as chamadas banais e sossegadas em que um pequeno erro passou despercebido.

Pontue cada uma das cinco com a mesma grelha curta. Limite-se a coisas que consegue julgar em quinze segundos por chamada. Aqui fica uma grelha que funciona para a maioria das pequenas empresas — copie-a, adapte as palavras ao seu ramo e use exatamente a mesma todos os meses, para que os números sejam comparáveis.

Cinco chamadas, cinco dimensões, vinte e cinco pequenos juízos. Leva uns cinco minutos e dá-lhe uma coisa que a intuição não dá: um padrão. Uma chamada que tropeçou no tom é ruído. Quatro em cinco a falhar no rigor é um sinal — e aponta quase sempre para uma coisa concreta do seu perfil que ficou desatualizada.

Preste especial atenção à linha da honestidade. Uma boa recepcionista de IA tem o direito de não saber. A falha que anda a caçar não é a ignorância — é o palpite bem construído, debitado com total segurança. Quando apanhar um numa transcrição, é o achado mais valioso do mês, porque lhe diz exatamente o que acrescentar ao perfil para que o assistente nunca mais tenha de improvisar ali.

Passo três: registe quantas vezes tem de o corrigir

A chamada-mistério e a amostra de transcrições são fotografias. A frequência de correções é a linha de tendência e é o número mais útil que vai guardar. A definição é simples: quantas vezes teve de corrigir, esclarecer ou pedir desculpa este mês por alguma coisa que o assistente disse a quem ligou?

Vai apanhá-las no terreno — um cliente que chega a dizer «o seu assistente disse-me que eram trinta euros» quando não são, uma marcação que cai no horário errado, ou alguém que fala de um serviço que deixou de fazer há meses. Cada uma destas é uma correção. Mantenha a contagem num sítio burro e duradouro: uma nota no telemóvel, uma linha numa folha de cálculo, as costas do livro de marcações. A ferramenta não interessa. A constância, sim.

O que interessa não é o número absoluto — qualquer configuração tem uma ou duas — mas a direção. Uma contagem baixa e estável, mês após mês, significa que o perfil e o negócio estão sincronizados. Uma subida lenta é o fumo que indica que alguma coisa se desviou: mudou um preço, acrescentou um serviço, alterou o horário, e o assistente continua a trabalhar com o mapa antigo.

Reconfigurar ou escalar? Como decidir

É esta a decisão para que toda a rotina aponta. Encontrou um problema. Resolve-o sozinho no perfil, ou é caso para levar ao apoio ao cliente? Acertar nesta divisão poupa-lhe pedidos de apoio inúteis e tardes inteiras a reler definições que nunca foram o problema.

A regra prática: se o assistente disse algo errado sobre o seu negócio, quase de certeza que se resolve no perfil. Se o assistente se comportou de forma estranha independentemente do que está no perfil — percebeu mal, repetidamente, quem falava com clareza, deixou cair chamadas, ignorou uma instrução que devia ter seguido —, é aí que o apoio ao cliente quer ouvi-lo.

Resolva sozinho quando…

• Indicou um preço antigo ou um intervalo já desatualizado — atualize o valor no perfil.
• Não conhecia um serviço novo ou continuou a oferecer um que já retirou — o perfil está desatualizado.
• Deu o horário errado ou desconhecia um encerramento de feriado — acrescente ou corrija o horário.
• Respondeu de forma desajeitada a uma pergunta frequente — escreva a resposta que você daria e acrescente-a, para deixar de haver improviso.
• Marcou num horário que não quer ocupado — aperte as regras de disponibilidade que configurou.

Recorra ao apoio quando…

• Percebe mal repetidamente quem fala com clareza, ou os clientes dizem que o som estava mau — pode ser um problema de encaminhamento ou de linha, e não do perfil.
• Ignora uma instrução que está clara e corretamente definida — por exemplo, continua a indicar preços depois de lhe ter dito que não o fizesse.
• Os resumos ou as transcrições deixam de chegar, ou as chamadas não estão a ser reencaminhadas como deviam.
• Alguma coisa não bate certo e já confirmou a sério que o perfil está correto. Quando o mapa está certo mas o comportamento não, o problema é deles.

A verdade é que a primeira lista cobre a esmagadora maioria do que vai encontrar. Não é um defeito do assistente — é a natureza da ferramenta. Ele sabe aquilo que lhe disseram. A maior parte dos problemas de qualidade são, no fundo, problemas de informação, e os problemas de informação resolvem-se em trinta segundos assim que se sabe onde olhar.

O que é, de facto, «bom»

Vale a pena ser claro quanto ao alvo, porque perseguir a perfeição só o vai deixar infeliz e desperdiçar o exercício todo. Um bom atendimento por IA não é o que responde a todas as perguntas de forma impecável. É o que responde bem às perguntas comuns e falha em segurança nas restantes — ou seja, quando não sabe, diz que não sabe e anota um recado sobre o qual pode agir.

Imagine uma clínica dentária com duas cadeiras. Alguém liga a perguntar por uma cirurgia de implantes que a clínica encaminha para um especialista. A resposta de ouro não é o assistente improvisar uma explicação confiante e errada. É esta: «Isso não é uma coisa que façamos aqui, mas posso tomar os seus dados e pedir ao dentista que lhe telefone para o orientar.» Essa chamada conta como ganha, mesmo com o assistente a «não saber a resposta». Recado anotado, quem ligou ficou tranquilo, ninguém foi induzido em erro.

Por isso, quando pontuar as transcrições, resista à tentação de descontar por um elegante «vou anotar o recado». Isso é o sistema a funcionar. Desconte por fingimento, por dados que ficaram por recolher e por factos desatualizados. A fasquia é fiável e honesto, não omnisciente. Um assistente que nunca diz «não sei» merece menos confiança, não mais.

Como fazer com que a rotina pegue mesmo

O melhor processo de qualidade é aquele que não abandona. Portanto, mantenha-o embaraçosamente leve. Agarre-o a alguma coisa que já faz todos os meses — a faturação, os salários, as contas do IVA — para que apanhe boleia de um hábito existente em vez de exigir um novo. Ponha um lembrete recorrente no calendário e dê-lhe um nome aborrecido e concreto, do género «verificar o telefone».

1. 1
   Escolha um dia fixo

   O mesmo dia todos os meses. A primeira segunda-feira, a última sexta — o que conseguir lembrar-se. A previsibilidade vale mais do que a ambição.
2. 2
   Mantenha a contagem à vista

   As correções vão para um único sítio a que olha mesmo. Se ficarem num documento que nunca abre, a linha de tendência morre.
3. 3
   Corrija na hora

   Quando uma chamada-mistério ou uma transcrição revelar um facto desatualizado, atualize o perfil de imediato — não o mande para uma lista de tarefas que vai ignorar.
4. 4
   Reveja a tendência a cada trimestre

   De três em três meses, olhe para trás para as suas contagens de correções. Estáveis e baixas? Está feito. A subir? Mudou alguma coisa de fundo — investigue uma vez, mas a sério.

Nada disto precisa de um gestor, de um painel de indicadores ou de uma folha de cálculo com fórmulas. Precisa de si, de vinte minutos e da disposição para ligar para o seu próprio negócio e ouvir como um estranho. É esta a disciplina toda, e é ela que separa um assistente que ganha clientes em silêncio de outro que os perde da mesma maneira.

Perguntas frequentes sobre a qualidade do atendimento por IA