L'essentiel à retenir
- Une grille d'évaluation qualité s'ajuste, elle ne se rédige pas d'un trait. Tant qu'un critère n'a pas tourné sur de vraies conversations, personne ne sait vraiment ce qu'il mesure.
- La réévaluation ferme la boucle : vous rejouez une grille en cours de construction sur des conversations que vous connaissez déjà, autant de fois qu'il le faut, sans réimport.
- La notation existante n'est jamais touchée. La réévaluation ajoute une seconde évaluation à côté, avec sa propre note et son propre historique.
- Seule l'analyse des critères est refacturée. La transcription, les résumés et les étiquettes sont repris tels quels.
- Une refonte de référentiel se mesure avant de basculer : vous renotez quelques conversations avec la nouvelle grille, vous comparez à l'ancienne, et vous décidez sur des chiffres plutôt que sur une intuition.
Une grille d'évaluation qualité ne s'écrit pas, elle se règle
Demandez à un responsable qualité comment il a construit son référentiel d'évaluation. Il vous racontera rarement une séance de rédaction. Il vous racontera des mois d'ajustements : un critère trop vague qui donnait toujours le même verdict, une pondération qui écrasait tout le reste, une formulation qui voulait dire une chose pour lui et une autre pour ses évaluateurs.
Cette grille est le socle de tout dispositif de quality monitoring : c'est elle qui décide de ce qui est mesuré, donc de ce qui sera piloté et coaché ensuite. Avec une grille appliquée par une IA, le travail de réglage ne disparaît pas. Il se déplace. La question n'est plus « mes évaluateurs comprennent-ils ce critère de la même façon ? » mais « ce critère, tel que je l'ai formulé, détecte-t-il vraiment ce que je cherche ? ». Et cette question n'a qu'une seule façon d'être tranchée : le faire tourner sur de vraies conversations, puis lire ce qu'il en dit.
C'est ce que permet la réévaluation. Depuis la fiche d'une conversation, vous créez une seconde évaluation, sur la grille de votre choix, y compris celle que vous êtes en train d'écrire.
Le cycle court : écrire, éprouver, corriger
En pratique, la mise au point d'une grille ressemble à ceci.
Vous choisissez quelques conversations témoins, cinq ou dix, que vous connaissez par cœur. Un excellent appel, un mauvais, deux ou trois cas limites : ceux dont vous savez déjà ce que la note devrait dire.
Vous écrivez une première version de votre grille, puis vous la lancez sur ces conversations. Vous ne regardez pas seulement la note. Vous ouvrez chaque critère et vous lisez la justification produite par l'analyse : la phrase qui explique pourquoi le critère a été considéré comme acquis ou non, avec le passage de la conversation qui l'a déclenché. C'est là que se voit un critère mal formulé. Le verdict peut être juste pour une mauvaise raison, ou faux pour une raison qui vous saute aux yeux dès que vous lisez l'explication.
Vous corrigez l'assertion dans votre bibliothèque de critères, et vous relancez la même grille sur les mêmes conversations. C'est pour cela que la réévaluation accepte explicitement une grille déjà utilisée : ce n'est pas un cas particulier toléré, c'est le mode de travail principal.
Comme chaque passage crée une évaluation distincte, vous gardez les versions successives côte à côte : vous voyez l'effet de votre correction plutôt que de le supposer.
Une bonne pratique pour vos essais. Les évaluations de test comptent dans vos indicateurs comme les autres. Une fois votre grille stabilisée, désactivez les évaluations d'essai : elles disparaissent du reporting et des exports, tout en restant consultables. Vous pouvez aussi les écarter à la volée grâce au filtre de la liste des conversations, décrit plus bas.
Refondre son référentiel qualité sans naviguer à l'aveugle
Le cycle court vaut pour un critère. Le même mécanisme change la nature d'un chantier bien plus lourd : la refonte d'un référentiel qualité.
Refondre une grille, c'est accepter une rupture dans son dispositif de quality monitoring. Les notes d'avant et d'après ne sont plus comparables, et la question qui vient immédiatement au comité de direction est toujours la même : est-ce que nos conseillers ont baissé, ou est-ce que la grille est plus sévère ? Sans point de comparaison, personne ne sait répondre.
La réévaluation permet de préparer la bascule sur des chiffres. Vous prenez un échantillon de conversations déjà notées avec l'ancienne grille, vous les renotez avec la nouvelle, et vous lisez l'écart. Un écart de quinze points sur le même échantillon ne dit pas que le plateau s'est dégradé : il dit que votre nouveau référentiel est plus exigeant de quinze points. Vous connaissez votre nouveau point de départ avant d'avoir basculé quoi que ce soit.
Ce travail est possible parce que la réévaluation n'écrase rien. L'ancienne notation reste intacte, votre historique de pilotage ne bouge pas, et les deux évaluations portent la date de l'appel d'origine, ce qui les garde comparables sur une même période.
Un exemple : les appels courts
Sur un plateau sortant, une part considérable des appels dure moins d'une minute : répondeurs, barrages secrétariat, mauvais numéros, refus immédiats. Les évaluer avec une grille d'entretien complet n'a aucun sens. La quasi-totalité des critères y est soit non applicable, soit mécaniquement non acquise, et le conseiller est pénalisé pour une situation qu'il ne maîtrise pas.
Construire une grille courte pour ces appels est une refonte partielle typique. Et la question qui décide de tout est empirique : sur mes appels de moins d'une minute, cette grille de vingt critères produit-elle une note qui veut dire quelque chose ? On ne le sait qu'en la faisant tourner sur de vrais appels courts, déjà analysés, dont on connaît déjà le verdict de la grille longue.
Concrètement, comment réévalue-t-on une conversation ?
Depuis la fiche d'une conversation, dans la barre d'actions du bloc Analyse, une icône de branche ouvre la fenêtre de réévaluation. Vous y choisissez la grille cible parmi toutes les grilles actives de votre organisation, avec leur nombre de critères. Les grilles déjà utilisées par une autre évaluation de la conversation restent proposées, simplement signalées comme telles.
Un commentaire de justification est obligatoire. Il n'est pas là pour la forme : une réévaluation crée une notation supplémentaire et consomme des crédits d'analyse. Ce commentaire explique pourquoi ce second passage a été demandé, et il reste consultable ensuite, ce qui est précieux quand on enchaîne les essais sur une grille en construction.
La nouvelle évaluation apparaît immédiatement, ses critères en cours d'analyse, avec un compte à rebours qui rafraîchit l'écran tout seul. Quelques dizaines de secondes plus tard, la note est là.
Le bouton reste grisé tant que l'analyse d'origine n'est pas complètement terminée : une réévaluation reprend les résumés et les étiquettes de la conversation, il faut donc qu'ils existent.
Ce qui n'est pas rejoué, et ce que cela change
C'est ce qui rend le cycle d'essais économiquement raisonnable.
| Étage de l'analyse | Rejoué ? | Pourquoi |
|---|---|---|
| Transcription | Non | Le texte de l'échange ne dépend pas de la grille |
| Résumés et sentiments | Non | Recopiés tels quels, sans nouvel appel au modèle |
| Étiquettes | Non | Elles se configurent au niveau de l'organisation, pas de la grille |
| Prosodie | Non | La mesure porte sur l'audio, pas sur le référentiel |
| Critères et assertions | Oui | C'est précisément ce que la grille définit |
Une réévaluation ne coûte donc que les assertions de la grille choisie. Sur une grille courte d'une vingtaine de critères, c'est une fraction du coût d'une analyse complète, et sans commune mesure avec un réimport qui repaierait la transcription. Trois tours d'essai sur dix conversations témoins restent une dépense modeste au regard d'un référentiel qu'on va utiliser pendant deux ans.
Chaque évaluation porte sa propre facturation, consultable dans son panneau dédié.
Deux évaluations, deux vies
Une réévaluation n'est pas une variante ni une annexe. C'est une évaluation à part entière.
Elle a sa propre note, calculée sur les critères de sa grille. Elle a son propre débrief, que le manager ouvre et clôt indépendamment. Elle est contestable par le conseiller au même titre que l'autre, parce qu'une note qui compte doit pouvoir faire l'objet d'un droit de réponse. Elle a son propre historique de versions. Et elle peut être désactivée sans que cela touche à l'évaluation dont elle est issue, ce qui est exactement ce qu'on veut faire d'une série d'essais.
Cette autonomie va jusqu'aux fichiers : la réévaluation possède sa propre copie de l'enregistrement et de la transcription. Une purge appliquée à l'une ne peut jamais amputer l'autre.
Un bandeau relie les évaluations d'une même conversation, avec pour chacune sa date, sa grille, sa note et la justification qui l'a motivée. Un clic passe de l'une à l'autre.
Une conversation dont l'enregistrement a été purgé reste réévaluable. La purge de l'audio et celle de la transcription sont deux réglages distincts. Tant que la transcription existe, l'analyse peut être rejouée : c'est sur le texte qu'elle travaille, pas sur le son.
Lire son reporting pendant une phase d'essais
Deux évaluations comptent pour deux dans les indicateurs. Pendant une campagne de tests de grille, c'est un effet dont il faut avoir conscience.
Deux garde-fous. Chaque évaluation remonte dans le reporting de sa propre grille, donc un filtre par grille sépare naturellement vos essais de votre pilotage courant. Et la liste des conversations propose un filtre à deux groupes : les statuts de débrief d'un côté, le périmètre d'évaluations de l'autre, avec quatre choix qui croisent l'origine et la réévaluation, l'actif et le désactivé. Vous affichez ce que vous voulez mesurer, et l'export reprend exactement le même périmètre.
Dans la liste, une réévaluation se repère à son icône de branche, à la place de la jauge d'avancement habituelle.
La traçabilité, par construction
La réévaluation rejoint la famille des gestes de supervision humaine qui encadrent le quality monitoring de Raisetalk : modifier une évaluation, la contester, la désactiver, la débriefer. Tous répondent au même principe : l'IA propose, l'humain dispose, et la plateforme garde la trace de qui a décidé quoi.
Ici, cette trace prend trois formes. L'évaluation d'origine n'est jamais modifiée, quoi qu'il arrive à la nouvelle. La justification est archivée comme première version de la réévaluation, avec son auteur et son horodatage. Et cette première version contient une photographie complète de l'évaluation dont elle est issue : en ouvrant l'historique d'une réévaluation, vous voyez d'où elle vient, dans l'état exact où elle était au moment du geste.
La réévaluation est enfin protégée par un droit dédié, « Réévaluer une conversation », dans la famille Conversations de la matrice des rôles et droits. Il est accordé par défaut aux administrateurs, et vous l'ouvrez à d'autres rôles selon votre organisation.
Pour commencer
- Choisissez trois à cinq conversations témoins, dont vous connaissez déjà le verdict attendu.
- Ouvrez la fiche de l'une d'elles, et cliquez sur l'icône de branche dans la barre d'actions du bloc Analyse.
- Sélectionnez la grille que vous êtes en train de construire, et notez en quelques mots l'hypothèse que vous testez.
- Lisez les justifications critère par critère, pas seulement la note. Corrigez vos assertions, puis relancez la même grille.
Et demain : plusieurs grilles dès l'import ?
Une question revient dès qu'on manipule plusieurs grilles sur une même conversation : pourquoi ne pas appliquer d'emblée deux référentiels à chaque appel, l'un commercial et l'autre orienté conformité, par exemple ?
C'est une bonne question, et la réévaluation n'en est pas la réponse. Un besoin systématique appelle une réponse systématique : la capacité de désigner plusieurs grilles au moment de l'intégration ou de l'import, pour que chaque conversation arrive avec ses deux lectures, sans geste manuel. Précisons d'ailleurs qu'un référentiel unique bien construit couvre souvent très bien deux dimensions à la fois, et qu'il faut de vraies raisons, deux destinataires distincts et deux plans d'action séparés, pour justifier de les scinder.
La réévaluation, elle, répond à un besoin différent et parfaitement complémentaire : le geste ponctuel, décidé après coup, sur une conversation précise. Mettre une grille à l'épreuve, préparer une refonte, cibler un débrief, corriger une erreur. C'est déjà beaucoup, et c'est disponible aujourd'hui.