BookYol

Concept

Calibration

La calibration est la concordance entre les probabilités que vous annoncez et la réalité : quand vous dites 70 %, avoir raison environ sept fois sur dix. La plupart des gens pèchent par excès de confiance : leurs 90 % se réalisent nettement moins de neuf fois sur dix, et seul un relevé écrit le révèle.

Les superprévisionnistes (Superforecasters) étudiés par Philip Tetlock se distinguaient moins par l’étendue de leurs connaissances que par la justesse avec laquelle ils en mesuraient les limites. Chez un prévisionniste bien calibré, les prévisions annoncées à 60 % se réalisent six fois sur dix, et celles à 90 %, neuf fois sur dix. Chez un prévisionniste trop sûr de lui, les 90 % peuvent tomber à 70. La calibration ne se ressent pas de l’intérieur : elle n’existe que si vous notez vos probabilités par écrit, les datez, puis les confrontez plus tard à ce qui s’est réellement produit. Le score de Brier (Brier Score), qui mesure l’écart entre les probabilités annoncées et les résultats, formalise ce contrôle, mais l’habitude compte davantage que la formule. Dès que vous constatez à quelle fréquence vos 90 % se réalisent vraiment, vous corrigez vos chiffres. Ce réglage constitue, à lui seul, tout le progrès.

Un exemple concret

Pendant un trimestre, une équipe de développement d’une entreprise de services numériques lyonnaise consigne ses estimations de livraison. Le bilan est net : les dates jugées sûres à 90 % n’ont été tenues que dans 60 % des cas. L’équipe annonce désormais des fourchettes assorties d’une marge de sécurité, et les clients cessent d’être pris au dépourvu.

Le mettre en pratique

  1. 1Écrire chaque probabilité sous forme de chiffre, accompagné d’une date.
  2. 2La confronter plus tard à ce qui s’est produit et noter dans quel sens l’estimation s’est trompée.
  3. 3Au-delà de dix prévisions, chercher la tendance qui se dégage et ajuster ses chiffres en conséquence.