B1 · Episode 10 · 4:18
Does the Dunning-Kruger Effect Even Exist?
This episode explores how people judge their own competence, critically examines the scientific validity of the Dunning-Kruger effect, and introduces metacognition and real-world self-assessment experiments—like estimating one's quiz performance before seeing results.
Source：Christophe Michel / Hygiène Mentale · License：CC BY 4.0
Transcript
Suis- je capable de citer sans me tromper les domaines sur lesquels j'ai une
Can I accurately list the areas in which I truly have expertise?
certaine expertise, que je comprends bien,
Areas that I understand well;
et les domaines sur lesquels j'ai surtout des préjugés et où je raconte probablement
and areas where I mostly hold biases—and am probably talking nonsense?
un peu de la merde?
(talking nonsense)
Quand j'ai des chances de me tromper, j'aimerais paraître prudent,
When I’m likely to be wrong, I’d like to appear cautious,
humble, et communiquer aux autres mon incertitude.
humble, and communicate my uncertainty to others.
Je crois bien que la capitale de l'Australie c'est Sydney,
I’m pretty sure Australia’s capital is Sydney,
mais je suis pas très sûr, faudrait vérifier.
but I’m not entirely sure—I should double-check.
Et quand j'ai toutes mes chances d'avoir raison,
And when I’m very likely right,
j'aimerais paraître sûr de moi, assertif,
I’d like to appear confident and assertive,
et communiquer aux autres ma confiance en moi.
and communicate my self-confidence to others.
La capitale du Kirghizstan, c'est Bichkek.
The capital of Kyrgyzstan is Bishkek.
Crois- moi, c'est absolument sûr, j'ai aucun doute.
Trust me—this is absolutely certain; I have no doubt at all.
Mais est- ce que je connais toujours ma propre incertitude?
But do I always recognize my own uncertainty?
Est- ce que je saurais me rendre compte quand je suis en situation de surconfiance?
Can I notice when I’m overconfident?
Peut- on tester soi- même sa propre cognition?
Can we test our own cognition?
C'est très méta, la métacognition.
This is highly meta—the very concept of metacognition.
Réfléchir à comment je réfléchis,
Reflecting on how I think,
c'est ce que je vais essayer de faire devant vous aujourd'hui.
is exactly what I’ll try to do in front of you today.
Donc voilà ma question: est- ce que je reconnais toujours ma propre compétence?
So here’s my question: Do I always recognize my own competence?
Un des moyens que j'ai mis en place pour m'auto- évaluer,
One method I’ve set up for self-assessment is
c'est d'essayer de me noter moi- même sur des critères mesurables,
trying to rate myself against measurable criteria,
en me faisant passer à moi- même des quiz.
for example, by giving myself quizzes.
Par exemple, je prends n'importe quel jeu de société avec des questions de culture
For instance, I pick any board-game quiz covering general knowledge,
générale, si possible sur des thématiques restreintes,
preferably with narrowly defined topics,
et je mets par écrit mes réponses.
and write down my answers.
Mais avant de regarder les résultats,
But before looking at the results,
j'essaye aussi d'évaluer ma propre performance.
I also try to assess my own performance.
Est- ce que je pense que j'ai plutôt raté ou plutôt réussi?
Do I think I mostly failed or mostly succeeded?
Et je mets par écrit la note que je pense que je vais obtenir.
Then, I write down the grade I think I’ll get.
Mon objectif, c'est pas d'avoir la meilleure note au test,
My goal isn’t to get the top score on the test,
même si c'est cool d'avoir de la culture générale,
even though it’s great to have broad general knowledge,
mon cerveau n'est pas un data center,
my brain isn’t a data center.
je m'en fiche un peu de connaître plein de trucs par cœur.
I don’t really care about memorizing tons of facts.
Mon objectif, c'est d'avoir une meilleure estimation de mes performances avant le
My goal is to have a better estimate of my performance before the results are released,
dépouillement.
to better gauge how I actually did.
Pour savoir si je savais que j'allais avoir une mauvaise note ou une bonne note,
So I can tell whether I knew in advance I’d get a bad or a good grade,
ou si je me faisais une fausse idée de mes capacités.
or whether I had a mistaken impression of my abilities.
Le doute, c'est le fondement de la pensée critique.
Doubt is the foundation of critical thinking.
J'aimerais pouvoir mesurer ma connaissance de l'étendue de mon ignorance,
I’d like to be able to measure how well I know the extent of my own ignorance,
tracer le contour de tout ce que je ne connais pas.
to map the outline of everything I don’t know.
Hmm, méta méta.
Hmm—meta-meta.
Cet écart entre la compétence que je pense avoir et ma compétence réelle que j'ai,
This gap between the competence I think I have and my actual competence,
c'est ce qu'ont cherché à mesurer les chercheurs Dunning et Kruger en 1999.
is exactly what researchers Dunning and Kruger sought to measure in 1999.
Inconscience de son incompétence ou comment les difficultés à reconnaître sa propre
the inability to recognize one’s own incompetence,
incompétence conduisent à des auto- évaluations surestimées.
a phenomenon where difficulty recognizing one’s own incompetence leads to overestimating oneself.
Et depuis il y a eu plein d'autres études sur le sujet,
Since then, many other studies on this topic have been conducted,
par de nombreuses équipes de recherche différentes.
by numerous different research teams.
Par exemple, Hodge 2001,
For example, Hodge’s 2001 study,
difficulté à reconnaître sa propre incompétence,
on the difficulty of recognizing one’s own incompetence,
des médecins novices qui ne sont pas qualifiés et qui n'en ont pas conscience.
found that novice doctors lack qualifications—and don’t realize it.
ou encore Ackermann deux mille deux,
or even Ackermann’s 2002 study,
ce que l'on sait de nos propres capacités et de nos propres connaissances.
that is, what we know about our own abilities and knowledge.
Dans ces études, on fait passer à des sujets différents types d'épreuves:
In these studies, participants complete various types of tests:
des exercices de grammaire, une mesure du sens de l'humour,
grammar exercises, a sense-of-humor assessment,
des tests de logique comme le LSAT qui est très utilisé pour les recrutements.
and logic tests—such as the LSAT, widely used in recruitment.
Et puis, avant de calculer la note,
Then, before calculating the actual score,
on demande au sujet d'évaluer sa propre performance.
participants are asked to assess their own performance.
Enfin, pour être exact, ce qui est demandé au sujet,
More precisely, what participants are asked to do is not,
c'est pas réellement d'évaluer sa compétence absolue,
to evaluate their absolute competence,
mais d'évaluer son classement relatif parmi tous les autres sujets testés.
but rather to estimate their relative ranking among all other participants.
Un truc du genre: on a
For instance: We administered this test to X people and collected their scores.
fait passer ce test à X personnes et on a leurs notes.
We gathered their scores,
On les a rangées ici dans l'ordre, en haut ce sont les meilleurs,
then ranked them here in order, with the top performers at the top,
là les bons, après les moins bons, et tout en bas les mauvais.
then the good ones, then the less good, and finally the worst at the very bottom.
À votre avis, où est- ce que vous, vous vous situeriez par rapport aux autres?
Where do you think you’d place yourself relative to everyone else?
Le sujet propose un percentile.
The participant gives a percentile.
Moi, je pense que je serais par là, vers 60 %.
I think I’d be around the 60th percentile.
Et ensuite on dépouille, et on compare avec sa position réelle.
Then researchers tally the results and compare them with the participant’s actual ranking.
Bon, il était dans les 42 %.
Well, he was actually at the 42nd percentile.
Pas loin. Et on fait pareil avec tout le monde.
Not far off. We do the same for everyone.
Donc on ne mesure pas la perception qu'ont les sujets de leurs compétences absolues,
So, we’re not measuring participants’ perception of their absolute competence,
mais on mesure la perception que les sujets ont de leur place par rapport aux
but rather their perception of where they stand relative to others.
autres. Ça va être important pour la suite.
This point will be important later.
On va faire un schéma.
Let’s draw a diagram.
Vous avez compris que j'aime les schémas.
You’ve probably noticed—I love diagrams.
Là, la position à laquelle je m'estime par rapport aux autres,
Here is where I believe I stand relative to others,
et là, ma position réelle par rapport aux autres,
and here is my actual position relative to others, based on grade calculations.
d'après les calculs des notes. Imaginons, exercice de pensée,
Let’s do a thought experiment:
si on savait tous parfaitement s'auto- évaluer par rapport aux autres,
Suppose we could all assess ourselves perfectly relative to others,
par magie.
by magic alone.