Le problème de l’analyse rétrospective des décisions politiques
Pourquoi de mauvaises choses arrivent aux bonnes décisions
Si vous voulez un superbe exemple de pensée axée sur les résultats, pensez à évaluer la COVID-19[feminine les décisions.
Dans psychologie, biais de résultat est l’erreur d’évaluer une décision en utilisant des informations que le décideur ne pouvait pas connaître à l’époque.
La différence entre le grand public et les professionnels de la décision est que le public (axé sur les résultats) jugera la Suède sur la base de « Comment les choses tournent » tandis que les professionnels de la décision ne le feront pas. Bien que les scientifiques des décisions puissent différer dans nos évaluations de la situation, nous ne jugerons la Suède que sur la base de ce qui était connu au moment où les décisions ont été prises.
Le biais de résultat est une forme d’irrationalité de masse socialement acceptable.
Beaucoup d’entre vous seront surpris d’entendre cela, car le biais de résultat est une forme d’irrationalité de masse socialement acceptable. Vous pourriez même ressentir les débuts de la rage, surtout si vous avez été amené à croire que « Comment les choses tournent » est exactement le moyen d’évaluer la qualité de la décision *.
C’est une illusion.
Quand la vie vous oblige à prendre des décisions sous information incomplète, une bonne décision peut avoir un mauvais résultat.
Par exemple, vous pouvez choisir de conduire en toute sécurité (bonne décision) et vous vous retrouvez toujours dans une collision surprise avec un idiot imprudent (mauvais résultat). Ou vous pouvez choisir de conduire comme un idiot imprudent (Mauvaise Décision) et arrivez à destination sans aucune égratignure (bon résultat). *
Obtenir un mauvais résultat ne signifie pas que vous avez pris une mauvaise décision.
Quel est l’intérêt d’évaluer une décision après avoir observé le résultat? Vous ne pouvez pas changer le passé. Le mieux que vous puissiez espérer est d’apprendre quelque chose qui vous aide à l’avenir, par exemple:
- Y a-t-il un problème avec la façon dont j’aborde les décisions? Dois-je changer mon processus de décision la prochaine fois?
- Le responsable est-il incompétent? Dois-je remplacer le décideur par une personne plus qualifiée?
Génial! Dans ce cas, analyse de décision est le domaine académique pour vous… et la première règle d’analyse de décision est: éviter les biais de résultats. Ne laissez pas le recul avec vous! La qualité d’une décision doit être évaluée en utilisant uniquement les informations dont disposait le décideur au moment où la décision a été prise.
Ne laissez pas le recul avec vous! Si vous évaluez la qualité d’une décision en fonction de son résultat, vous en tirerez de mauvaises leçons.
Si vous évaluez la qualité d’une décision en fonction de son résultat, vous en tirerez de mauvaises leçons. Des leçons comme, «La prochaine fois, je devrais conduire comme un idiot imprudent.» Ou peut-être voterez-vous pour congédier un décideur compétent dont les bonnes décisions ont conduit à un mauvais résultat, réduisant ainsi l’offre de dirigeants compétents de la société. (J’ai rédigé une explication détaillée ici pour ceux qui ont besoin de convaincre.)
Étant donné que la bonne façon d’évaluer la qualité de la décision consiste à ne regarder que les informations dont disposent les décideurs au moment où ils ont agi, il existe bonnes nouvelles pour COVID-19[feminine les amateurs de politiques: si vous voulez analyser la qualité des grandes décisions prises en mars 2020, pas besoin d’attendre!
Inutile d’attendre!
Vous pouvez commencer tout de suite. Ce que vous devez savoir, c’est:
- Que savaient ces dirigeants au moment où ils ont pris leurs décisions?
- Quels étaient leurs objectifs?
- Ont-ils fait leurs devoirs? Ont-ils déployé des efforts appropriés pour rassembler information?
- Comment ont-ils raisonné sur leurs données et hypothèses?
En d’autres termes, il vous suffit de connaître les choses qui se sont produites dans le passé.
Si vous attendez de voir comment «les choses se passent» avant d’évaluer la qualité de la décision, vous punissez essentiellement les dirigeants de ne pas avoir de boule de cristal.
Voilà le mauvaises nouvelles: vous ne pourrez probablement pas mettre la main sur ces données. La chose la plus proche dont dispose la plupart d’entre nous est l’information consignée dans le dossier public au moment de la décision, qui vous donne rarement une image fidèle de la façon dont la décision a été prise. vraiment fabriqué.
Si vous lisez ceci en 2020, vous vivez dans une société qui tolère le biais de résultats. Cela signifie que votre société n’oblige pas ses décideurs à pré-commit aux stratégies de décision (par ex. « Si le nombre de cas COVID-19 par jour dans notre juridiction est de x, nous ferons … ») ou pour conserver / partager des informations sur la façon dont ils ont réellement pris certaines de leurs décisions les plus importantes. (Après tout, si ces enregistrements n’existent pas, comment jugerez-vous quelqu’un responsable?)
Si ces enregistrements n’existent pas, il est difficile de tenir quelqu’un pour responsable.
Une fois que les résultats apparaissent, les dirigeants peuvent faire exactement ce que nous voyons faire dans les expériences de laboratoire de psychologie: attribuer le mérite des bons résultats et attribuer les mauvais résultats à la malchance ou aux bons boucs émissaires. (C’est appelé parti pris égoïste.) Les dirigeants avisés trouveront toujours des données pour sauvegarder une histoire inventée. Tout assaisonné scientifiques des données connaissez ce secret: si vous ne pouvez pas torturer exploratoire les données jusqu’à ce qu’elles confessent, remettez-les à un pro pour pouvoir regarder et apprendre, gamin.
« Si vous torturez les données assez longtemps, cela vous avouera. » -Ronald Coase
Donc, si vous êtes intéressé à réfléchir à une politique ou à étudier une stratégie, n’attendez pas de voir comment les choses se déroulent; commencez dès maintenant! Plus vous attendez, plus il est difficile d’évaluer la qualité des décisions non documentées.
Obtenir un véritable compte rendu de ceux qui n’ont pas documenté leur processus de décision devient moins probable à chaque minute qui passe.
N’oubliez pas d’ajouter une date à côté de vos gribouillis. Sinon, vous tomberez amoureux de biais de recul (celui où vous ajustez votre mémoire après avoir appris la réponse, en disant « Je le savais depuis le début » bien que non).
Ne soyons pas assez naïfs pour supposer que les gens nous en diront plus qu’ils ne le doivent.
Je ne retiens pas mon souffle pour le jour où tout les décisions importantes sont documentées selon une norme qui rend les professeurs d’analyse des décisions gais.
Cependant, certains d’entre vous sont en mesure d’influencer les décideurs. Vous cherchez peut-être à développer vos propres compétences décisionnelles. Ou peut-être que vous êtes un leader qui a le pouvoir de promouvoir ou de rétrograder les décideurs subalternes. Dans les deux cas, vous êtes fortement incité à insister pour que les processus de décision soient méticuleusement documentés.
Beaucoup d’entre vous sont fortement incités à insister pour que les processus de décision soient méticuleusement documentés.
La mémoire humaine est un seau qui fuit et même les gens avec les meilleures intentions ne peuvent pas se fier à se rappeler comment ils ont pris une décision passée poussiéreuse. C’est à cela que servent les crayons et les disques. Pour étouffer le biais rétrospectif dans l’œuf et éviter de vous couper le pied sur le biais de résultat, suivez cette règle simple:
Gardez une trace datée du processus de décision.
Suis-je en train de dire que les résultats ne peuvent rien vous apprendre? Pas tout à fait, mais attention à ne pas faux cours.
Chaque nouveau moment est l’occasion d’une nouvelle décision basée sur les informations dont vous disposez.
Ne vous méprenez pas. Je ne vous dis pas d’ignorer complètement les résultats, car cela vous donnerait une vision irréaliste de la présent. Je vous dis d’utiliser les données de résultat actuelles pour les décisions présentes / futures, tout en évitant le biais de résultat: une vision irréaliste de la passé et une évaluation incorrecte des compétences décisionnelles.
Accompagner la bonne décision d’hier pourrait être la mauvaise décision d’aujourd’hui.
Chaque nouveau moment est l’occasion d’une nouvelle décision basée sur les informations dont vous disposez. À la lumière d’un nouveau résultat, aller de pair avec la bonne décision d’hier pourrait être la mauvaise décision d’aujourd’hui. Les données sur les résultats qui précèdent votre nouvelle décision sont équitables – assurez-vous simplement de bien faire les temps. Ne pénalisez jamais un décideur faute de boule de cristal.
L’astuce consiste à apprendre du passé (et non de l’avenir).
Si vous êtes curieux d’en savoir plus sur la façon d’utiliser les résultats sans être victime de biais de résultats, faites-le moi savoir par retweeter cet article. Plus il y a de partages / retweets, plus je traiterai des sujets suivants dans les suivis:
- Résultats en tant que données pour les décisions futures.
- Décisions itératives versus décisions ponctuelles.
- Inaction, indécision et responsabilité négative.
- Comparer les résultats réels avec les résultats attendus et la gamme de résultats potentiels.
- Le rôle de la surprise dans l’exposition des angles morts.
- Résultats surprenants contre sources de données surprenantes.
- Le danger de mettre trop de poids sur les données récentes.
- Pourquoi il est difficile d’évaluer la qualité de votre propre décision.
- Évaluation collaborative.
- Comment éviter les biais de recul et la création de sens contre-productifs.
* Mauvaises décisions ou décisions mal prises?
Ne nous embrouillons pas dans le langage. Si votre idiome fait une distinction entre un Mauvaise Décision et un décision qui est mal fait, vous utilisez vos mots différemment des analystes décisionnels. Ces termes sont synonymes pour nous. Dans ce cas, ce que vous appelleriez une «mauvaise décision» est ce que nous appelons un mauvais résultat. Pour donner un sens à cet article, vous devrez traduire de notre langue vers la vôtre. Dans notre lexique:
- Mauvaise décision = décision mal prise = mauvais processus au moment du choix = démonstration de compétences de prise de décision de mauvaise qualité
- Mauvais résultat = mauvais résultat après l’exécution de la décision = conséquences désagréables dans le monde réel de la décision