Analyse des retours chatbot : transformer les évaluations en meilleures réponses

Ouvrez l'assistant concerné, choisissez Tools et trouvez Feedback. Activez Enable feedback collection et gardez Show thumbs up/down on bot answers in widget activé. Ces deux commandes fonctionnent ensemble : l'outil accepte les enregistrements de retours, tandis que le paramètre du widget affiche les boutons d'évaluation sous les messages éligibles de l'assistant.

N'activez les notifications par e-mail que si le destinataire est autorisé à recevoir le contenu des conversations et dispose d'une procédure de réponse documentée. Une règle de départ efficace est : examiner les retours négatifs sous un jour ouvré, inspecter immédiatement les réponses sensibles liées aux politiques ou à la sécurité, et inclure des exemples positifs dans l'échantillon qualité hebdomadaire. Enregistrez les paramètres, rechargez Tools et confirmez que chaque option souhaitée est toujours activée.

Ouvrez Dashboard → Feedback. Sélectionnez d'abord un assistant, puis une langue, un signal comme Negative Feedback ou Positive Feedback, et une plage de dates fixe. N'utilisez la recherche qu'après avoir appliqué ces filtres. Consignez les valeurs des filtres et la date afin qu'un autre évaluateur puisse reproduire la même cohorte.

L'exemple contrôlé filtre d'abord une ligne Tutorial Lab, English, Negative Feedback, puis bascule sur la ligne distincte Positive Feedback utilisée pour l'inspection détaillée. Cela valide les filtres et les enregistrements de test précis, et non une tendance générale ou une intention d'achat. En production, comparez un lot significatif avec le même assistant, la même langue et la même fenêtre temporelle. Ne qualifiez jamais le nombre de lignes de taux de satisfaction sans connaître le nombre de réponses éligibles affichées dans cette cohorte exacte.

Cliquez sur l'icône de l'œil d'une ligne. Feedback Details affiche l'assistant, l'identifiant de session (session ID), la langue, l'étiquette d'intérêt, l'heure de création, le contenu du retour et le contexte enregistré. Lisez l'intégralité de la réponse et la question exacte ensemble. Ouvrez ensuite la conversation source si disponible pour inspecter ce qui s'est passé avant et après ce message.

Dans l'exemple vérifié, le visiteur a demandé : “What is the 2028 warranty policy for Northstar Services?” La réponse enregistrée indique que les informations disponibles ne contiennent pas cette politique, et la ligne est étiquetée Positive Feedback. L'explication la plus solide n'est pas que l'assistant connaissait la politique, mais qu'il a évité d'en inventer une. Notez ceci comme un bon exemple d'abstention sécurisée et demandez au responsable de la documentation si une réponse officielle doit être ajoutée.

Pour les retours négatifs, catégorisez la preuve avant d'éditer quoi que ce soit : fait erroné ou obsolète, information manquante, ton inadapté, format peu clair, action échouée, parcours de suivi manquant, décalage d'attente ou frustration sans lien avec la réponse de l'assistant. Associez une cause principale et éventuellement une cause secondaire pour permettre un décompte fiable des tendances mensuelles.

Identifiez le responsable de la cause. Corrigez un fait erroné ou obsolète dans le site web ou document de référence. Ajoutez l'information manquante validée dans la source maintenue. Ajustez le rôle personnalisé (custom role) lorsque de nombreuses réponses partagent un problème de ton, de périmètre ou d'escalade. Réparez la configuration d'Action Bar, de capture de prospects (lead), de réservation, de chat en direct ou d'API lorsque la réponse manque d'une étape suivante fonctionnelle. N'envisagez de comparer les modèles qu'après avoir fiabilisé les sources, la recherche documentaire et les instructions.

Pour l'exemple de garantie, n'inventez pas une politique plausible et ne reformulez pas la réponse prudente uniquement pour paraître plus sûr. Demandez au responsable de la documentation le texte approuvé pour 2028 et sa date d'entrée en vigueur. Si aucun document n'existe, conservez la réponse transparente et proposez une voie de contact support suivie. Si un contenu validé est fourni, mettez à jour sa source faisant autorité, supprimez les doublons contradictoires, attendez la fin de l'indexation et notez la version de la source.

Modifiez une seule couche à la fois. Consignez la réponse exacte initiale, le responsable, la modification, la version de la source et l'amélioration attendue. Cela garantit une explication claire, que les retours s'améliorent, stagnent ou régressent.

Démarrez une nouvelle conversation de test dès que la source modifiée affiche le statut Completed. Posez la question d'origine exacte, puis des variantes naturelles comme “Does Northstar cover repairs in 2028?” et “Where can I read the current warranty terms?”. Comparez chaque réponse avec la source validée et vérifiez les citations, les dates, les limites, le ton et l'action suivante. Posez également une question volontairement non documentée pour confirmer que l'abstention sécurisée fonctionne toujours.

L'exemple visible sert de référence vérifiée : la question exacte sur la garantie a reçu une réponse prudente et le widget a bien affiché les pouces d'évaluation. Comme aucune politique approuvée pour 2028 n'a été ajoutée lors de cette démonstration, le tutoriel ne revendique pas de réponse de garantie corrigée. Une modification réelle n'est validée que lorsque le contenu attendu apparaît dans une session propre et que les questions de régression proches restent correctes.

Surveillez la récurrence en appliquant les mêmes règles d'assistant, de langue, de signal et de période. Comparez le nombre de causes par réponse éligible lorsque le dénominateur est disponible, et non les simples totaux de pouces. Examinez immédiatement les échecs à haut risque et synthétisez mensuellement les thèmes à moindre risque en consignant le responsable, la version de la source, l'action menée, le résultat du re-test et la réapparition éventuelle du motif.