Concept
Bruit de système (System Noise)
Le bruit de système est la variabilité indésirable de jugements qui devraient être identiques (peines, prix ou diagnostics différents pour un même dossier) selon la personne qui juge et le moment où elle le fait.
Dans « Noise », Daniel Kahneman, Olivier Sibony et Cass R. Sunstein distinguent deux formes d’erreur de jugement. Le biais pousse les jugements dans une même direction ; le bruit les disperse. Le bruit de système comporte deux composantes principales. Le bruit de niveau apparaît quand certains juges se montrent, de façon générale, plus sévères ou plus cléments que d’autres. Le bruit de configuration apparaît quand les juges réagissent différemment à tel ou tel cas particulier. Ce dernier englobe le bruit occasionnel : la même personne juge le même dossier autrement un autre jour, selon son humeur ou l’heure. Les auteurs résument l’enjeu par une équation : l’erreur globale est égale au carré du biais plus le carré du bruit. Le bruit pèse donc autant que le biais dans la qualité des décisions. Il passe pourtant inaperçu, car chaque dossier n’est en général jugé qu’une fois. Il a enfin une propriété précieuse pour une entreprise : on peut le mesurer sans connaître la bonne réponse. Si plusieurs jugements portés sur un même cas divergent, ils ne peuvent pas être tous justes.
Un exemple concret
Chez un assureur lillois, un sinistre de dégât des eaux est chiffré par erreur par deux gestionnaires : l’un l’évalue à 18 000 €, l’autre à 31 000 €. La responsable du service sinistres demande alors à quatre gestionnaires de rechiffrer dix dossiers clos, sans leur montrer les montants d’origine. Les écarts sont importants sur presque tous les dossiers. L’équipe n’avait jamais comparé ses jugements auparavant.
Le mettre en pratique
- 1Choisir un jugement que l’organisation rend souvent et se demander si l’issue aurait changé avec un autre collègue en charge du dossier.
- 2Séparer la question du biais (nous trompons-nous toujours dans le même sens ?) de celle du bruit (nos jugements sont-ils dispersés ?).
- 3Mesurer le bruit en faisant juger les mêmes dossiers, de façon indépendante, par plusieurs personnes, puis comparer l’écart entre leurs réponses.
