Un agent qu’on ne mesure pas est un agent qui stagne
Vous avez importé votre documentation, intégré le widget, et l’agent répond aux questions de vos utilisateurs. Et ensuite ?
C’est précisément là que beaucoup d’entreprises s’arrêtent — et c’est là que l’agent cesse de progresser. Un agent conversationnel n’est pas un projet qu’on livre une fois pour toutes, c’est un service qui se pilote. La bonne nouvelle : quatre chiffres suffisent, ils sont tous dans votre tableau de bord SophiaDesk, et chacun appelle une action différente.
Indicateur 1 — Le taux de réponse
Ce qu’il mesure : la part des questions auxquelles votre agent a su répondre à partir de vos documents.
C’est votre indicateur de couverture documentaire. Attention au contresens : il ne dit pas si vos réponses sont bonnes, il dit si vous avez la matière pour répondre. Un agent qui ne répond pas n’est pas un agent défaillant, c’est un agent à qui il manque un document.
SophiaDesk classe ce taux en paliers explicites :
| Taux de réponse | Lecture |
|---|---|
| Moins de 20 % | Insuffisant — la base doit être enrichie |
| 20 à 40 % | Utile, mais nettement améliorable |
| 40 à 60 % | Satisfaisant — près d’une question sur deux trouve réponse |
| 60 à 80 % | Très bien — c’est la cible d’une bonne base de connaissance |
| Plus de 80 % | Excellent |
La cible à viser : plus de 60 %. En dessous de 50 %, le tableau de bord vous alerte explicitement : ce n’est plus un réglage fin, c’est un problème de fond.
Quoi en faire : un taux bas se corrige avec des documents, pas avec de la technique. Identifiez les sujets manquants et importez-les.
Indicateur 2 — Les questions sans réponse
Ce qu’il mesure : la part des questions où l’agent n’a pas trouvé de quoi répondre. Cible : moins de 30 %.
C’est le miroir du précédent, mais il est bien plus actionnable — parce que ce n’est pas seulement un pourcentage, c’est une liste. Chaque question restée sans réponse remonte automatiquement dans vos insights, avec le texte exact de la question posée.
Autrement dit : vos utilisateurs écrivent eux-mêmes votre feuille de route documentaire. Ils vous disent, dans leurs propres mots, ce qui manque.
Quoi en faire : traitez cette file régulièrement. Si un sujet revient plusieurs fois, il ne mérite pas une réponse ponctuelle mais un vrai document.
Indicateur 3 — Le feedback négatif
Ce qu’il mesure : la part des réponses que vos utilisateurs ont jugées insatisfaisantes. Cible : moins de 10 %.
Ne confondez pas les deux problèmes, ils n’ont ni la même cause ni la même gravité :
- Sans réponse — l’agent n’a rien trouvé. Il le dit. L’utilisateur est déçu, mais pas induit en erreur.
- Feedback négatif — l’agent a répondu, et la réponse n’a pas convenu. C’est plus sérieux : soit la documentation est ambiguë ou périmée, soit la question était mal comprise.
Un pouce rouge vaut donc plusieurs questions sans réponse en priorité de traitement. Au-delà de 10 % de retours négatifs, SophiaDesk lève une alerte de santé sur l’agent.
Vous pouvez recueillir ce signal de deux façons : le feedback classique par pouces, ou le feedback structuré à trois niveaux qui distingue « oui, c’est parfait », « pas tout à fait, je vais préciser ma question » et « non, pas du tout ». Le second est plus riche : il sépare la réponse incomplète de la réponse fausse.
Quoi en faire : chaque pouce rouge remonte aussi en insight. Relisez la question et la réponse données, puis corrigez le document source — pas seulement la réponse.
Indicateur 4 — Les insights à compléter
Ce qu’il mesure : le nombre de sujets identifiés en attente d’une réponse de votre part.
C’est le seul des quatre sur lequel vous agissez directement. Les trois premiers décrivent une situation ; celui-ci est une file de travail. Chaque insight suit un cycle simple :
- À compléter — l’agent a détecté un manque, vous n’avez pas encore répondu
- Actif — vous avez rédigé la réponse, l’agent s’en sert immédiatement, en plus de vos documents
- Rejeté — le sujet n’est pas pertinent, il ne vous sera plus proposé
Un conseil qui change tout : soyez complet dans vos réponses d’insight. Elles ne servent pas qu’à l’utilisateur qui a posé la question, mais à tous ceux qui poseront une question voisine.
Quoi en faire : une file d’insights qui gonfle sans jamais se vider est le signal le plus fiable qu’un agent est en train d’être abandonné.
Le rituel : vingt minutes par semaine
Le pilotage n’a pas besoin d’être lourd. Un créneau hebdomadaire suffit :
- Ouvrez les statistiques sur 7 jours
- Vérifiez le taux de réponse et surtout sa tendance
- Traitez la file des insights à compléter — c’est le gros du temps utile
- Une fois par mois, regardez le nuage de mots des questions posées : il révèle des sujets que vous n’aviez pas anticipés
En un trimestre, ce rituel fait plus pour la qualité de votre agent que n’importe quel réglage technique.
Trois pièges de lecture
Juger sur une journée. Le volume quotidien est trop faible pour être significatif. Lisez la tendance lissée sur 7 jours, pas le point du jour.
Confondre volume et qualité. Un pic de questions n’est pas un succès en soi. Un agent très sollicité avec 30 % de taux de réponse frustre plus d’utilisateurs qu’il n’en aide.
Oublier le périmètre. Les indicateurs de qualité portent sur les requêtes facturables : les réponses rapides et les requêtes bloquées par sécurité en sont exclues. C’est voulu — elles fausseraient la lecture.
Conclusion : mesurer, c’est déjà améliorer
Ces quatre chiffres ne sont pas un tableau de bord de plus. Ils forment une boucle : le taux de réponse vous dit où vous en êtes, les questions sans réponse et les retours négatifs vous disent quoi corriger, les insights vous donnent le moyen de le faire.
Les entreprises dont l’agent progresse ne sont pas celles qui ont la meilleure documentation au départ. Ce sont celles qui regardent ces chiffres chaque semaine.
Vous n’avez pas encore d’agent à piloter ? Créez le vôtre gratuitement et importez vos premiers documents en quelques minutes.