B1 · Episode 13 · 5:20
The Superforecasters: Who Predicts the Future Best?
This episode explores who excels at forecasting the future, revealing that 'superforecasters' aren’t defined by elite credentials or high IQs—but by cognitive traits like pattern recognition, intellectual humility, probabilistic thinking, and willingness to update beliefs in light of new evidence.
Source:Christophe Michel / Hygiène Mentale · License:CC BY 4.0
Transcript
Les experts des services de renseignement ne sont pas bien bons.
Intelligence experts aren’t very good.
Pourtant ils ont accès à tout plein de données classifiées, confidentielles,
Yet they have access to vast amounts of classified, confidential data—
qui coûtent très cher, l'espionnage, la diplomatie internationale,
data that are extremely expensive to obtain—such as espionage, international diplomacy,
les écoutes, les surveillances satellites, tout ça,
phone tapping, satellite surveillance, and so on.
et auxquelles les autres participants n'ont pas accès.
Other participants don’t have access to any of this.
Et les meilleurs, c'est toujours les mêmes.
And the top performers are always the same people.
C'est les champions habituels des tournois de prévision.
They’re the usual champions of forecasting tournaments.
Il y a des gens qui scorent très haut de façon consistante.
Some individuals consistently score very high.
En particulier une équipe que Tetlock avait lui- même recrutée,
In particular, a team Tetlock himself recruited—
nommée The Good Judgment Project, le projet perspicacité,
called The Good Judgment Project—the ‘Good Judgment’ initiative—
composée des 50 meilleurs champions des tournois de prédiction précédents,
made up of the top 50 champions from previous forecasting tournaments—
ceux qui ont les meilleurs scores de façon stable dans le temps,
those who’ve maintained the highest scores steadily over time—
un peu les Avengers de la prévision.
a bit like the Avengers of forecasting.
Tetlock les surnomme les superforecasters, les super prévisionnistes.
Tetlock calls them ‘superforecasters’.
Ils explosent tout.
They outperform everyone else by a wide margin.
Et c'est pas des gens connus, c'est des anonymes qui ont des métiers très diverses:
And they’re not famous people—they’re anonymous individuals with highly diverse occupations:
historienne, ouvrier, assistant social, mathématicien, économiste,
a historian, a factory worker, a social worker, a mathematician, an economist,
pharmacienne, chercheuse, cadre dans la fonction publique, etc.
a pharmacist, a researcher, a civil service manager, and so on.
La principale question que je me pose,
The main question I’m asking myself is
c'est la principale question de Tetlock lui- même,
also the central question Tetlock himself asks,
et c'est aussi la principale question que le gouvernement US lui avait posée,
and it’s the key question the U.S. government posed to him:
c'est: quel est le profil de ces gens- là,
What traits do these people have?
ceux qui ont les meilleures capacités de prévision,
Those with the strongest forecasting abilities—
ceux qui font les meilleurs scores au tournoi?
those who achieve the highest scores in the tournaments—
Qu'est- ce qu'ils ont en commun, comment les reconnaître,
What do they have in common? How can we recognize them?
comment leur ressembler? Eh bien allez,
How can we become more like them? Well, let’s go ahead and
fouillons les données de toutes ces études de tournois de prévision.
dig into the data from all these forecasting tournament studies.
Pour commencer, est- ce qu'il y a un lien avec l'âge, le sexe,
First, is there a link with age, gender,
la nationalité?
or nationality?
Ben bof, un peu, mais
Well… not really—somewhat, yes,
pas trop. C'est pas du tout ça qui est déterminant.
but not much. None of these are decisive factors.
Avec la catégorie socioprofessionnelle,
What about socioeconomic occupational category?
bah oui, les bons provisionnistes ne sont pas des SDF,
Well, yes—reliable forecasters aren’t homeless people,
ni des gens désœuvrés dans la misère avec des vies de merde,
nor people living in misery, unemployed and struggling,
c'était prévisible.
That was predictable.
Les bons provisionnistes ont des métiers stables qui leur permettent d'avoir la
Reliable forecasters hold stable jobs,
tranquillité d'esprit et un minimum de temps pour se renseigner sur tous ces sujets
giving them mental peace and at least some time to learn about such complex topics.
complexes. Quand tu sais pas si tu pourras manger ou te loger le mois prochain,
When you’re unsure whether you’ll have food or shelter next month,
c'est sûr que t'as d'autres sujets de préoccupation que de jouer à deviner
you surely have more urgent concerns than trying to guess,
l'évolution de la banquise au pôle Nord sur les dix prochaines années.
for example, how Arctic sea ice will change over the next ten years.
Mais parmi les gens qui ont des vies stables et un peu aisées,
Yet among people with stable, relatively comfortable lives,
il n'y a pas de métiers meilleurs que les autres.
no profession is inherently better at forecasting than others.
Les journalistes ne font pas mieux que les avocats,
Journalists don’t outperform lawyers,
les chercheuses ne font pas mieux que les médecins,
female researchers don’t outperform doctors,
les très riches ne font pas mieux que les moyens riches.
the ultra-wealthy don’t outperform the merely well-off.
Est- ce qu'il y a une corrélation avec le niveau d'études?
Is there a correlation with level of education?
Bah oui, un peu, mais c'est pas parce que les programmes scolaires ou universitaires
Well, yes—somewhat—but not because school or university curricula,
contiennent des compétences utiles à la prévision.
themselves teach practical forecasting skills.
C'est juste que les études permettent d'avoir des métiers stables,
It’s simply that education helps people secure stable jobs,
des vies aisées, et donc ça laisse du temps et la disposition d'esprit pour
and live relatively comfortable lives—freeing up time and mental energy,
s'intéresser à ces sujets- là.
to engage with these topics.
Les surdiplômés hyperdocteurs ne font pas mieux que les moyens diplômés.
‘Overqualified’ PhDs don’t outperform those with average academic credentials.
Est- ce qu'il y a une corrélation avec le QI?
Is there a correlation with IQ?
Bah oui, un peu, mais pas parce que avoir un haut QI est utile à la prévision.
Well, yes, a little—but not because having a high IQ is useful for forecasting.
Vous commencez à comprendre le principe.
You’re starting to grasp the principle.
C'est juste qu'un QI élevé est
It’s simply that a high IQ
corrélé avec le niveau d'études, qui permet d'avoir des vies stables et aisées,
is correlated with educational attainment, which helps people achieve stable and comfortable lives,
et qui donc laisse du temps et la disposition d'esprit pour s'intéresser à ces
and thus leaves time and mental space to engage with these topics.
sujets- là. Les surdoués zèbres Mensa haut potentiel ne font pas bien mieux que des
High-IQ ‘zebra’ individuals (e.g., Mensa members or high-potential people)
moyens QI. Bon, je vais pas vous faire un catalogue, mais tous ces points- là,
don’t forecast significantly better than average-IQ people.
quand on les prend à condition matérielle d'existence égale,
Now, I won’t run through a full catalog—but when we examine all these factors under equal material living conditions,
ils n'ont que des liens très faibles sur la capacité de prévision.
they show only very weak links to forecasting ability.
En tout cas, ces liens sont complètement écrasés par d'autres paramètres de
At least, these weak links are completely overshadowed by other personality traits—
personnalité qui, eux, semblent très fortement liés au score de prévision.
traits that appear strongly linked to forecasting scores.
Par exemple, des tests psychologiques de reconnaissance de motifs.
For example, psychological pattern-recognition tests.
Ça consiste à repérer des régularités, des schémas dans des images ou des sons,
They involve spotting regularities and patterns in images or sounds,
et souvent à anticiper le prochain à venir.
and often require anticipating what comes next.
Je sais pas pourquoi c'est lié, mais bon, c'est comme ça.
I don’t know why it’s linked—but that’s just how it is.
Ceux qui sont mauvais à faire ça sont aussi mauvais à prévoir l'avenir.
People who perform poorly on such tasks also tend to forecast poorly.
Ceux qui sont bons au jeu des prévisions sont aussi souvent bons au test de
People who excel at forecasting
réflexivité cognitive.
often also do well on cognitive reflection tests.
Ça, ça mesure à quel point vous êtes prompt à vous méfier de votre propre intuition.
This test measures how readily you question your own intuition.
On pose des questions auxquelles il y a une réponse évidente qui saute aux yeux,
Questions present an answer that leaps to mind as obvious,
mais qui est fausse, et où il faut faire un raisonnement un peu complexe pour
yet is actually wrong—and arriving at the correct answer
trouver la bonne réponse.
requires slightly more complex reasoning.
C'est un petit peu ce que j'avais introduit dans mon épisode sur les systèmes 1 et
This is somewhat like what I introduced in my episode on System 1 and System 2:
système 2. Si votre bullshitomètre, qui vous alerte de passer de l'un à l'autre,
If your ‘bullshit detector’—the mechanism alerting you to switch between them—
est un peu grippé, ça fait pas de bonnes prévisions.
is a bit sluggish, your forecasts won’t be good.
Les capacités de prévision sont apparemment aussi liées à notre capacité à donner
Forecasting ability appears to be linked, too, to our capacity to give
des réponses continues.
continuous responses.
Il existe des tests qui mesurent à quel point vous avez tendance à répondre de façon
There are tests that measure how likely you are to respond
tranchée, blanc ou noir, ou si vous préférez exprimer votre opinion en niveaux de
in absolute, black-or-white terms,
gris. C'est la raison pour laquelle j'insiste beaucoup sur l'approche bayésienne des
or whether you prefer to express your opinion in shades of ‘gray.’
croyances, sur des échelles de zéro pour cent à cent pour cent,
That’s why I strongly emphasize the Bayesian approach to beliefs—
exclu. Les capacités de prévision sont apparemment aussi liées à notre flexibilité
using a scale from 0% to 100%,
cognitive. Ça c'est notre aisance à changer d'avis face à de nouvelles informations.
excluding all-or-nothing thinking. Forecasting ability also appears linked to our cognitive flexibility—
Oui, il y a des tests qui mesurent ça.
Yes, there are tests that measure this.
Ça consiste à présenter une situation et demander au sujet son opinion sur un truc,
It involves presenting a situation and asking the participant for their opinion on something;
et puis après avoir noté son opinion,
then, after noting their initial opinion,
on lui présente d'autres éléments de contexte susceptibles de mieux éclairer la
you provide additional contextual information that may better illuminate the situation,
situation, susceptibles de lui faire changer d'avis.
information that might lead them to change their mind.
Certaines personnes n'ont aucun problème à comprendre que avec ces nouvelles
Some people have no trouble understanding that, with this new information, revising one’s opinion is not only natural,
informations, c'est normal de modifier son opinion, c'est même sain,
but also healthy;
et d'autres ont plus de résistance.
others show greater resistance.
Ils restent collés à leur première opinion, quelle qu'elle fût,
They cling rigidly to their first opinion, whatever it was,
parce que changer d'avis ce serait admettre s'être trompé, et ça,
because, to them, changing one’s mind means admitting they were wrong,
jamais.
and that—never.