B1 · Episode 11 · 4:28

Does the Dunning-Kruger Effect Even Exist?

This episode critically examines the Dunning-Kruger effect, arguing that the observed patterns in self-assessment data likely stem from statistical noise and regression toward the mean—not from incompetence preventing self-awareness. It also discusses the widespread illusory superiority bias affecting everyone, regardless of skill level.

Source:Christophe Michel / Hygiène Mentale · License:CC BY 4.0

Transcript

  1. On proposerait toujours exactement sa position réelle.

    We would always state our actual position exactly.

  2. Ça donnerait une belle courbe, comme ça.

    This would produce a nice curve like this.

  3. Les mauvais du groupe savent qu'ils sont les mauvais du groupe,

    The poor performers in the group know they’re poor performers,

  4. les bofs savent qu'ils sont bofs,

    teachers know they’re teachers,

  5. les meilleurs savent qu'ils sont les meilleurs. Mais en vrai,

    and the top performers know they’re the best. But in reality,

  6. il y a bien sûr une certaine dispersion statistique dans nos performances.

    there’s naturally some statistical variation in our performance.

  7. Moi, en moyenne, je fais environ 13 sur 20 aux exercices de grammaire,

    For me, my average score on grammar exercises is about 13 out of 20,

  8. c'est mon niveau.

    that’s my actual level.

  9. Mais je fais pas toujours exactement 13, des fois je fais 15,

    But I don’t always score exactly 13—sometimes I get 15,

  10. des fois je fais 11.

    sometimes only 11.

  11. Ma performance a un certain bruit,

    My actual performance has some random noise,

  12. voir mon épisode 34.

    see Episode 34 for details.

  13. Ma capacité à m'auto- évaluer elle aussi a un certain bruit.

    My ability to self-assess also has some random noise.

  14. Même si, imaginons, en moyenne je tombe juste quand je dois me comparer aux autres,

    Even if, hypothetically, my self-comparisons with others are accurate on average,

  15. je suis parfois un peu au- dessus, parfois un peu en dessous.

    I’m sometimes slightly overconfident and sometimes slightly underconfident.

  16. En prenant en compte ces bruits,

    Taking these noises into account,

  17. on observera naturellement une courbe comme celle- ci.

    we’ll naturally observe a curve like this one.

  18. La pente dépend de l'écart- type des dispersions.

    Its slope depends on the standard deviation of the variations.

  19. C'est typique d'un effet de régression vers la moyenne,

    This is a classic example of the regression-to-the-mean effect,

  20. comme on l'a vu dans l'épisode 35.

    as explained in Episode 35.

  21. Ce qui arrive toujours lorsqu'il y a du bruit.

    It always occurs whenever there’s noise.

  22. Et si les sujets ont en plus un biais,

    And if participants also have a bias,

  23. par exemple on a tous tendance à se surévaluer,

    for instance, a common tendency to overestimate ourselves,

  24. ce qui est un phénomène bien connu,

    a well-documented phenomenon,

  25. on observerait une courbe comme celle- là, décalée verticalement.

    we’d observe a curve like this—one shifted upward.

  26. Bien, maintenant regardons les données expérimentales des recherches.

    Well, now let’s look at the experimental data from these studies.

  27. Que ce soit celles de l'étude originale de Dunning et Kruger,

    Whether it’s the original study by Dunning and Kruger,

  28. ou des nombreuses réplications, elles sont toutes similaires,

    or the many replications—they all show very similar patterns,

  29. quel que soit le type d'épreuve.

    regardless of the type of test used.

  30. C'est une courbe, ben, comme ça justement.

    It’s a curve—well, exactly like this one.

  31. Tout le monde répond qu'il est dans la moyenne haute.

    Everyone rates themselves as above average.

  32. On observe une légère pente, les moins bons se placent un peu plus bas que les bons,

    We see a slight upward slope: lower performers rate themselves somewhat lower than higher performers,

  33. mais pas beaucoup.

    but not by much.

  34. Les résultats observés ne sont absolument pas remis en question,

    The observed results themselves are absolutely uncontested,

  35. par personne. On observe bien ça.

    by anyone. This pattern is indeed what we observe.

  36. C'est l'interprétation de ces résultats qui est un sujet très discuté.

    What’s highly debated, however, is how to interpret these results.

  37. Parce que, en plus des résultats,

    Because, in addition to the findings,

  38. les auteurs ont aussi proposé une explication du phénomène.

    the authors also proposed an explanation for the phenomenon.

  39. Selon eux, je paraphrase, les gens qui sont incompétents croient qu'ils sont

    According to them (paraphrased): people who lack competence believe they are competent,

  40. compétents. Ils se surestiment, alors que les experts, ça va,

    they overestimate themselves, whereas experts—well, they’re fine,

  41. eux ils s'évaluent correctement.

    they assess themselves accurately.

  42. Quand on ne connaît rien à un sujet,

    When you know nothing about a subject,

  43. on n'a pas les compétences nécessaires pour reconnaître cette compétence.

    you lack the very skills needed to recognize that competence.

  44. Une façon moins charitable de le dire, c'est:

    A less charitable way to put it is:

  45. les cons sont tellement cons qu'ils ne se rendent même pas compte qu'ils sont cons.

    Stupid people are so stupid that they don’t even realize how stupid they are.

  46. Ils ont un biais qui les pousse à se prendre pour des experts,

    They suffer from a bias that makes them think they’re experts,

  47. alors que les vrais experts, eux, sont conscients de leurs capacités.

    whereas real experts are aware of their actual abilities.

  48. et humble. Si la science prouve ça, c'est un orgasme pour les éthiciens.

    And humble. If science proves this, ethicists would have an absolute field day.

  49. Et la version grosse caricature qui tâche, c'est ce même extrait.

    And the widely circulated, heavily caricatured version is precisely this excerpt.

  50. L'effet Dunning- Kruger, c'est quelque chose qui a été développé en psychologie

    The Dunning-Kruger effect originates in social psychology.

  51. sociale. C'est un effet qui dit que quand on commence à s'intéresser à une question,

    It states that when we first begin exploring a topic,

  52. notre impression de connaissance dépasse très largement notre connaissance réelle.

    our impression of how much we know vastly exceeds our actual knowledge.

  53. Ça veut dire que, grosso modo,

    This means, roughly speaking,

  54. on a l'impression d'avoir compris quelque chose, alors qu'en fait,

    we feel like we’ve understood something, whereas in fact,

  55. on n'a rien compris du tout.

    we haven’t understood anything at all.

  56. Moi, il faut m'expliquer ce que c'est qu'une pandémie où il n'y a pas de malades ni

    For me, you need to explain to me first:

  57. de morts. Vous nous prenez pour des cons, quoi?

    what exactly is a ‘pandemic with no patients and no deaths’? Do you take us for fools?

  58. Quand on regarde le graphique qui montre ce qu'est l'effet Dunning- Kruger,

    When we look at the graph illustrating the Dunning-Kruger effect,

  59. eh bien on va gravir au départ la montagne de la stupidité.

    we initially climb the ‘mountain of ignorance’.

  60. On va ensuite redescendre dans la vallée de l'humilité.

    Then we descend into the ‘valley of humility’.

  61. On va arriver ensuite sur ce qu'on appelle la plaine de la consolidation.

    After that, we reach what’s called the ‘plateau of consolidation’.

  62. Pour se rendre compte qu'on ne comprend rien à ces questions,

    To truly realize we understand nothing about these questions,

  63. eh bien il faut aller beaucoup plus loin sur la courbe.

    we must go much further along the curve.

  64. Ah là là, Dunning- Krugerception.

    Oh dear—this is pure ‘Dunning-Krugerception’!

  65. Toutes les publications récentes sur les auto- évaluations de performance doivent

    All recent publications on self-assessments of performance,

  66. consacrer des chapitres entiers rien qu'à déconstruire les mauvaises interprétations

    must devote entire chapters solely to deconstructing misinterpretations of this effect,

  67. de cet effet Dunning- Kruger.

    namely, the Dunning-Kruger effect.

  68. Par exemple, McIntosh 2018, déconstruction.

    For example, McIntosh (2018) offers such a deconstruction.

  69. de l'effet dunning kruger.

    A deconstruction of the Dunning-Kruger effect.

  70. Je cite: « Le même récurrent que les gens stupides seraient trop stupides pour se

    I quote: ‘The recurring claim that “stupid people are too stupid to realize they’re stupid”',

  71. rendre compte qu'ils le sont est une idée reçue,

    is actually a misconception,

  72. proposée probablement par des gens qui ne connaissent pas suffisamment le sujet.

    likely proposed by people who don’t know the subject well enough.'

  73. Tellement méta.

    So meta!

  74. Mais même la version charitable de l'article original,

    Yet even the most charitable interpretation of the original paper,

  75. je la trouve un peu trop audacieuse.

    I still find it somewhat overly bold.

  76. Parce que moi, quand je regarde les données, je vois juste un bruit,

    Because when I examine the data, all I see is random noise,

  77. l'effet de régression vers la moyenne,

    namely, the regression-to-the-mean effect,

  78. plus un biais général de surestimation, par tout le monde,

    plus a general bias toward overestimation—present in everyone,

  79. les bons comme les mauvais.

    both the skilled and the unskilled.'

  80. Cet effet de supériorité illusoire,

    This illusory sense of superiority

  81. c'est un résultat assez clair de la psychologie cognitive.

    is a fairly clear finding of cognitive psychology.

  82. Malgré les problèmes de réplication dans cette discipline, ça,

    Despite replication problems in this field, this phenomenon

  83. c'est quand même assez solide.

    remains quite robust.

  84. Quand on demande à des conducteurs s'ils sont plutôt parmi les bons conducteurs de

    When drivers are asked whether they consider themselves among the better drivers in their city

  85. leur ville ou plutôt parmi les moins bons,

    or among the poorer ones,

  86. tout le monde répond qu'il est meilleur conducteur que les autres,

    everyone replies that they drive better than others,

  87. bien sûr. Tout le monde pense qu'il est au- dessus de la moyenne,

    of course. Everyone believes they are above average,

  88. les incompétents comme les compétents.

    both the incompetent and the competent.