BookYol

Concept

Indicateurs de vanité (Vanity Metrics)

Les indicateurs de vanité sont des chiffres cumulés, comme le total des inscriptions, des téléchargements ou des pages vues, qui progressent tant que l’entreprise continue d’investir temps et argent, et qui ne peuvent donc pas dire si la dernière action menée a produit un effet.

La distinction posée par Eric Ries conduit à un test simple : ce chiffre pourrait-il baisser à cause d’une décision que nous avons prise ? Le nombre total d’utilisateurs inscrits ne le peut pas : il ne fait que croître. Il mesure donc l’effort et le temps écoulé, non le produit, et un tableau de bord rempli de chiffres de ce genre donne à une entreprise en difficulté l’allure d’une entreprise en croissance. À l’opposé se trouve l’indicateur actionnable (Actionable Metric), qui relie un changement précis à une différence précise dans le comportement des clients. L’outil qui rend un indicateur actionnable est la cohorte, c’est-à-dire un groupe d’utilisateurs arrivés pendant la même période : on compare ce qu’ont fait les utilisateurs arrivés cette semaine avec ce qu’avaient fait ceux de la semaine précédente, avant le changement. IMVU, l’entreprise de Ries, a vu le total des inscriptions grimper pendant des mois, alors que chaque nouvelle cohorte convertissait à peu près au même taux que la précédente. Les améliorations ne changeaient rien, et seule la lecture par cohortes pouvait le révéler. Le danger des indicateurs de vanité tient moins à ce qu’ils mentent qu’à ce qu’ils flattent.

Un exemple concret

Une start-up lyonnaise de livraison de repas fête son premier anniversaire avec 200 000 utilisateurs inscrits. Une recrue arrivée depuis peu construit un graphique par cohortes : sur cent personnes ayant commandé pour la première fois au cours d’une semaine donnée, neuf recommandent dans le mois, et ce chiffre n’a pas bougé en onze versions successives de l’application. Les inscriptions étaient bien réelles ; le produit, lui, ne s’était pas amélioré une seule fois.

Le mettre en pratique

  1. 1Soumettre chaque chiffre du tableau de bord à une seule question : pourrait-il baisser à cause d’une décision que nous avons prise ? Si la réponse est non, le retirer du tableau de bord.
  2. 2Remplacer les totaux par des cohortes : ce qu’ont fait les nouveaux utilisateurs de cette semaine, à côté de ce qu’avaient fait ceux de la semaine précédente, avant le changement.
  3. 3Juger le marketing aux clients acquis et conservés, jamais au trafic ni au nombre d’impressions.