B1 · Episode 3 · 4:39
Trusting Theory or Experience?
This episode explores the balance between trusting theoretical models and empirical evidence, explaining how scientists rationally weigh unexpected data against well-established theories—and why both skepticism and confidence are essential in reasoning.
Source:Christophe Michel / Hygiène Mentale · License:CC BY 4.0
Transcript
Mais en vérité, parmi les deux,
But in truth, between these two approaches,
il n'y a pas une bonne et une mauvaise façon de raisonner.
there is no single right or wrong way to reason.
Moi en tout cas, j'ai toujours l'impression d'avoir ces deux bonhommes dans ma tête,
At least for me, I always feel as if there are two little figures in my head,
qui essayent de me convaincre de trucs contradictoires,
each trying to convince me of contradictory ideas,
avec chacun de bons arguments.
and each with solid arguments.
d'un côté c'est bien de ne pas être absolument complètement irrévocablement attaché
On the one hand, it’s good not to be absolutely, completely, irrevocably attached
à sa théorie il faut savoir la remettre en question si vraiment les données sont
to one’s theory — we must be willing to question it if the data truly seem too implausible.
trop invraisemblables.
Otherwise, it just doesn’t make sense.
D'un autre côté, c'est quand même bien de pouvoir se former petit à petit une vision
On the other hand, it’s also valuable to gradually build a coherent worldview,
du monde, un modèle théorique cohérent,
a theoretically consistent model,
sans tout foutre par terre à la moindre donnée contradictoire.
without tearing it all down at the first sign of contradictory evidence.
Parce que des données contradictoires, il y en a toujours,
Because contradictory data always appear —
soit parce que le modèle théorique est vraiment bien et très utile,
either because the theoretical model is genuinely sound and useful,
mais avec une variabilité statistique.
yet subject to statistical variability.
soit juste parce que ce sont les données qui sont foireuses ou mes instruments de
Or simply because the data themselves are flawed,
mesure qui ont déconné ou mes instruments sont bons mais j'ai mal lu les données
or the measuring instruments malfunctioned,
ou je les ai bien lues mais je les ai mal notées ou je les ai bien notées mais mal
or the instruments worked fine but I misread the data,
comprises Il y a un million de raisons pour lesquelles on peut avoir certaines
or I read them correctly but recorded them wrongly,
données invraisemblables, même si le modèle théorique est très bien et très utile.
or recorded them accurately but misunderstood them. There are countless reasons why implausible data may arise, even when the model is excellent and highly useful.
souvenez- vous tous les modèles sont faux
Remember: all models are wrong,
certains sont utiles.
yet some are useful.
Rejeter mon modèle théorique ultra performant à la moindre donnée légèrement
To discard my highly effective theoretical model
inattendue, ce ne serait pas très sage.
at the slightest unexpected finding would be unwise.
Lorsque, en 2011, les détecteurs de l'expérience OPERA ont détecté un comportement
In 2011, when OPERA experiment detectors observed unusual neutrino behavior —
inhabituel des neutrinos, ils allaient apparemment plus vite que la lumière,
they appeared to travel faster than light —
les scientifiques ne se sont pas dit: « Ah bah zut,
scientists didn’t say, “Oh dear, now we’ll have to throw away
il va falloir que l'on mette un siècle de recherche scientifique et de réussite
a century of scientific research and technological success into the trash,”
technologique à la poubelle», comme l'aurait fait le gros Tony.
as the reckless Tony might have done.
Certains journalistes l'ont dit à l'époque, bien sûr,
Some journalists pointed this out at the time, of course,
mais pas les scientifiques qui travaillaient sur ce projet.
but the scientists working on this project did not.
Eux, ils se sont juste dit: « Mince,
They simply said to themselves: “Darn,
il me semble avoir tout branché comme il faut,
I think I’ve connected everything correctly,
où est- ce que j'ai fait une erreur? »
so where did I go wrong?”
Parce qu'ils avaient confiance dans leur modèle,
Because they trusted their model,
dans le fait que c'est impossible de dépasser la vitesse de la lumière.
and believed it’s impossible to exceed the speed of light.
Ils ont été plus Dr.
They were more like Dr.
John. Et ils ont eu raison, parce qu'ils ont fini par trouver le câble de connexion
John. And they were right—because they eventually found the connection cable
qui était foireux.
that was faulty.
En fait, il me faut apprendre à évaluer mon niveau de confiance personnelle dans mon
In fact, I need to learn how to assess my personal confidence in my model,
modèle. Et le comparer à la vraisemblance des données si mon modèle était vrai.
and compare it with how likely the data would be if my model were true.
pour que je change radicalement d'opinion,
For me to radically change my mind,
il ne suffit pas que mes données soient juste invraisemblables,
it’s not enough for my data to merely seem implausible,
il faut qu'elles me soient plus invraisemblables que ce que ma théorie m'avait l'air
they must seem even more implausible than my theory originally seemed plausible.
plausible. Il faut comparer les deux.
We must compare these two things.
Quand on m'avait proposé le jeu au tout début,
When someone first proposed this game to me at the very beginning,
j'avais accepté que le dé n'était pas pipé à, qu'est- ce que j'avais dit,
I accepted the assumption that the die wasn’t loaded, with a confidence level of—what did I say?
99, 9%? Je doutais à une chance sur mille.
99.9%? So I doubted it by one in a thousand.
donc un résultat qui n'avait qu'une chance sur six d'advenir ça m'agace un peu parce
So a result with only a one-in-six chance of occurring annoys me a bit—
que j'ai perdu mais ça ne suffit pas à me faire quitter la partie
because I lost, but it’s not enough to make me quit the game;
par contre un résultat qui n'avait qu'une chance sur sept mille d'advenir comme cinq
but a result with only a one-in-seven-thousand chance—like rolling five sixes in a row—
six d'affilée ça c'est plus fort que ma confiance dans un dé pas pipé c'est le
exceeds my confidence in the idea that the die isn’t loaded;
moment où je me dis qu'il vaut mieux quitter la partie
that’s when I decide it’s better to quit the game.
Ce chiffre seuil là, 99, 9%, je l'ai pas calculé,
This threshold value—99.9%—I didn’t calculate precisely;
c'est juste une estimation au doigt mouillé, complètement subjective.
it’s just a rough, completely subjective, finger-in-the-air estimate.
Il dépend du contexte.
It depends on the context.
Si c'est Lin Guiyanrong qui me propose le jeu, je joue longtemps.
If Lin Guiyanrong proposes the game to me, I’ll play it for a long time.
Lui c'est un matheux, il est fan d'énigmes théoriques de ce genre,
He’s a mathematician, obsessed with theoretical puzzles like this one,
il me propose sûrement une expérience de pensée pédagogique.
so he’d surely propose an educational thought experiment.
Si c'est Clément Fraize, je ne joue même pas le premier coup.
But if it’s Clément Fraize, I won’t even make the first move.
Lui, c'est un mentaliste, il possède sûrement plein de jeux truqués,
He’s a mentalist—he surely has plenty of rigged games,
il essaye sûrement de me piéger.
and is probably trying to trap me.
Pas d'offense.
No offense intended.
Vous l'avez remarqué, j'aime utiliser des petits exemples issus de la théorie des
You may have noticed that I like using small examples from game theory,
jeux pour aborder un point précis d'un raisonnement, avec des dés ou des cartes.
such as dice rolls or card draws, to approach a specific point in reasoning.
Je trouve ça important de commencer par comprendre le mécanisme intellectuel pur
I think it’s important first to understand the pure intellectual mechanism behind a simple card draw or dice roll,
d'un simple tirage de cartes ou d'un simple jet de dés,
the purely intellectual mechanism,
avant de prétendre avoir une opinion sur la géopolitique mondiale ou sur la
before claiming to hold an opinion on global geopolitics or on macroeconomics applied to the Common Agricultural Policy,
macroéconomie appliquée à la politique agricole commune.
would be justified.
Mais, en faisant ça, il faut pas que je cache les limites de cette approche.
But while doing so, I must not hide the limits of this approach.
En particulier, il faut veiller à ne pas laisser entendre qu'il est possible de
In particular, we must avoid giving the impression that,
modéliser mathématiquement la complexité du réel avec des modèles simplistes de ce
using simplistic models like these,
genre. Taleb appelle ça le sophisme ludique.
we can mathematically model the complexity of reality—a fallacy Taleb calls the ‘ludic fallacy’.
Enfin, ludic fallacy, du coup c'est le fallacieux ludique, du coup.
‘Ludic fallacy’ literally means the ‘fallacy of games’.
C'est quand on surinterprète la théorie des jeux en essayant de l'appliquer tel quel
It occurs when we overinterpret game theory,
à des situations complexes de la vie réelle,
trying to apply it directly and unchanged to complex real-life situations;
quand on laisse entendre que l'on peut évaluer ses curseurs bayésiens sur la seule
when we imply that we can calibrate our Bayesian parameters,
base de la théorie de la prise de décision,
solely on the basis of decision theory;
ou quand on pense qu'apprendre par cœur les tableaux du dilemme du prisonnier,
or when we think that memorizing all the payoff tables of the prisoner’s dilemma,
toutes les performances de toutes les stratégies de toutes les matrices,
and all performances of all strategies across all matrices,
que ça va nous permettre de mieux gérer nos relations sociales.
will help us manage our social relationships better.
Non bien sûr.
No, of course not.