Concept
Audit de bruit (Noise Audit)
L’audit de bruit est un test au cours duquel plusieurs professionnels jugent séparément les mêmes cas réalistes, afin que l’organisation mesure l’écart entre leurs jugements sans avoir besoin de connaître la bonne réponse.
L’audit de bruit est l’outil de diagnostic central de « Noise », de Daniel Kahneman, Olivier Sibony et Cass R. Sunstein. Les auteurs y appellent bruit la dispersion indésirable de jugements qui devraient être identiques. La méthode est simple. On choisit un jugement que l’organisation rend de façon répétée et on prépare quelques cas réalistes. On demande ensuite à plusieurs des personnes qui rendent habituellement ce jugement de les évaluer chacune de son côté, puis on compare les réponses. Le livre décrit des audits menés dans une compagnie d’assurance : les dirigeants s’attendaient à un écart modeste entre les primes proposées par deux souscripteurs pour le même dossier ; ils ont découvert un écart plusieurs fois supérieur. Une mesure pratique consiste à calculer la différence entre deux jugements tirés au hasard sur le même cas, rapportée à leur moyenne. Un audit reste honnête à trois conditions : des cas réalistes, des jugements strictement indépendants et un objectif annoncé dès le départ, améliorer le système et non classer les personnes.
Un exemple concret
La directrice des achats d’un groupe hospitalier lyonnais retire le nom des fournisseurs et les anciennes notes de six offres reçues lors d’appels d’offres passés. Elle demande ensuite à cinq acheteurs de les noter chacun de son côté. Sur l’une des offres, les notes vont de 48 à 81 sur 100. Elle présente les résultats sans nommer personne, et l’équipe s’accorde sur ce que chaque note doit signifier.
Le mettre en pratique
- 1Choisir trois à six cas réels et passés relevant d’un même jugement récurrent, et en retirer les issues comme les réponses antérieures.
- 2Demander à plusieurs collègues de les juger seuls, sans se concerter, et recueillir toutes les réponses avant que quiconque voie celles des autres.
- 3Présenter la dispersion sans nommer personne, puis discuter de ce qui permettrait aux jugements de converger.
