Chapitre 08 / 10
Comment vous savez qu'il répond juste
Un assistant qui répond avec assurance ne dit pas s'il a raison. Ce chapitre explique comment on mesure la qualité de ses réponses au lieu de la supposer.
Un cadre d'évaluation est un ensemble de questions de référence, dont on connaît la bonne réponse, qu'on repose régulièrement à l'assistant pour vérifier qu'il continue de répondre juste.
Pourquoi une première démonstration convaincante ne suffit pas
Un assistant peut très bien répondre à la démonstration préparée et se tromper dès le lendemain sur une question légèrement différente. Seule une mesure régulière le révèle.
Ce qu'on met en place concrètement
Un audit initial relève les erreurs (confusion entre deux dossiers proches, seuil de reconnaissance trop bas) et ajuste le comportement de l'assistant en conséquence.
Le suivi se poursuit ensuite dans le temps, pour détecter une dégradation avant qu'un client ou un collaborateur ne la remarque.
Questions fréquentes
Qui vérifie les réponses de l'assistant ?
Nous mettons en place le cadre de mesure avec vous, et vos équipes valident les questions de référence sur votre métier.
À quelle fréquence faut-il mesurer ?
Ça dépend du volume de nouveaux documents ajoutés. Un contrôle mensuel convient à la plupart des cas.
Que faire quand l'assistant se trompe ?
On identifie la cause (document ambigu, seuil trop bas, question mal formulée) et on ajuste, plutôt que de changer de modèle au hasard.
Tous les chapitres
- 01. Ce qu'est un assistant interne, et pourquoi vos équipes cherchent encore
- 02. Ce qu'un modèle sait faire, et ce qu'il invente
- 03. Répondre sur vos documents plutôt que sur Internet
- 04. Répondre sur vos documents ou autre chose : comment trancher
- 05. Brancher l'assistant sur vos logiciels
- 06. Quand l'assistant agit au lieu de répondre
- 07. Où vivent vos données : France, Suisse, RGPD et nLPD
- 08. Comment vous savez qu'il répond juste
- 09. Ce que ça coûte vraiment
- 10. Pourquoi ça échoue
