Si ça a réussi... C'était donc le bon choix !

Vous avez un choix à faire : A ou B.

Si vous faites un choix A et que, 5 ans plus tard, tout fonctionne très bien... Il peut être tentant de conclure :

Décision A = réussite observée = A était une bonne décision.
(Voire) A était une meilleure décision que B.

C'est intuitif mais à priori pas particulièrement rigoureux...

La réussite pourrait par exemple être due à d'autres facteurs que la décision elle-même. Et surtout, nous ne savons pas directement ce qui se serait passé si nous avions choisi B !

Les sciences ont formalisé ce problème, notamment dans le domaine de l'inférence causale. Puisque cette autre trajectoire n'a pas été réalisée, on cherche à estimer le « contrefactuel manquant » : ce qui aurait pu se produire sous une autre action ou dans d'autres conditions

Concepts

raisonnement contrefactuel · inférence causale · résultats potentiels · biais de résultat · biais rétrospectif

Pratiques et outils

groupe témoin · A/B test · pilote · Difference-in-Differences · contrôle synthétique · scénarios contrefactuels · journal de décision

Ce que cela masque

Cela peut masquer l'efficacité réelle des décisions prises, leurs effets se mêlant à de multiples autres causes.

Questions à se poser

Qu'est-ce qui me permet d'attribuer ce résultat à cette décision?
Que se serait-il probablement passé si nous avions fait autrement?
Quels autres facteurs peuvent expliquer le résultat observé?
Avons-nous un point de comparaison?
Pouvons-nous conserver ou créer un groupe témoin avant de généraliser?