B1 · Episode 3 · 4:45
Why randomized controlled trials matter
Contrasts retrospective studies—vulnerable to confounding factors—with randomized controlled trials, which better isolate causal relationships by balancing variables across groups.
Source:Apprenti Sage · License:CC BY 4.0
Transcript
Quand on prend deux éléments au hasard dans la nature, il y a quand même peu de
When we randomly select two elements from nature, there's still little chance they're linked to each other.
chances qu'ils soient liés l'un à l'autre.
chance that they're linked to each other.
Notre hypothèse nulle est donc:
Our null hypothesis is therefore:
manger des carottes n'a pas d'effet sur l'espérance de vie.
eating carrots has no effect on life expectancy.
On va la garder de côté, elle nous sera utile plus tard.
We'll set it aside; it'll be useful later.
Le premier type d'étude auquel on pourrait penser, c'est: bah on demande aux gens
The first type of study we might think of is: well, we ask people
s'ils mangent des carottes et en quelle quantité, et puis après on regarde leur
whether they eat carrots and how much, and then we look at their
espérance de vie?
life expectancy?
Alors oui, ça c'est une étude rétrospective.
Yes, this is a retrospective study.
C'est bien pour se donner une première idée, mais c'est pas suffisant.
It's good for getting an initial idea, but it's not sufficient.
Bah pourquoi? Parce qu'elles sont sujettes à des facteurs de confusion.
Well, why? Because they're subject to confounding factors.
on peut se dire ici que ceux qui mangent des carottes ont globalement une meilleure
we might say here that those who eat carrots generally have better
hygiène de vie et c'est leur hygiène de vie en général qui peut avoir augmenté leur
lifestyle habits, and it's their overall lifestyle that may have increased their
espérance de vie pas forcément le fait d'avoir mangé des carottes dans le cas
life expectancy—not necessarily the fact that they ate carrots.
général un facteur de confusion c'est une caractéristique qui ne se retrouve pas de
generally, a confounding factor is a characteristic that isn't evenly distributed across groups.
manière égale dans les différents échantillons de la population étudiée du coup
equally across the different samples of the studied population.
cette caractéristique peut tout à fait être la cause d'un éventuel résultat
this characteristic could very well be the cause of a potential result.
On sait pas. J'espère que le deuxième type est plus concluant.
We don’t know. I hope the second type is more conclusive.
Et bien justement oui, il
Well, exactly, it
existe un moyen pas trop compliqué de s'affranchir de ces facteurs de confusion.
there exists a not-too-complicated way to eliminate these confounding factors.
Les études prospectives randomisées.
Prospective randomized studies.
On sépare notre population en deux groupes aléatoirement.
We randomly divide our population into two groups.
Ceci permet d'éviter d'avoir un caractère plus présent dans un groupe que dans
This avoids having a characteristic more present in one group than in
l'autre. Donc plus de facteur de confusion.
the other. So no more confounding factor.
À un groupe, on dit de manger des carottes sans rien changer au reste de leur vie.
To one group, we tell them to eat carrots without changing anything else in their lives.
Et à un autre groupe, on ne dit de pas manger de carottes,
And to another group, we tell them not to eat carrots,
et tout pareil, sans changer le reste de leur vie.
and likewise, without changing anything else in their lives.
Et ensuite on regarde l'espérance de vie dans chacun de ces deux groupes.
And then we look at life expectancy in each of these two groups.
Ah donc là on peut conclure si notre affirmation est vraie ou pas.
Ah, so now we can conclude whether our statement is true or not.
Pas encore tout à fait.
Not quite yet.
Maintenant on va calculer la p value.
Now we will calculate the p-value.
C'est la probabilité d'avoir un résultat au moins aussi concluant si l'hypothèse
It is the probability of obtaining a result at least as conclusive if the null hypothesis is true.
nulle est vraie.
is true.
Donc ici, c'est la probabilité d'avoir un résultat au moins aussi concluant si la
So here, it is the probability of obtaining a result at least as conclusive if the
carotte n'a pas d'effet sur l'espérance de vie.
carrot has no effect on life expectancy.
Plus cette valeur est petite, plus l'étude est concluante.
The smaller this value, the more conclusive the study.
En général, on dit qu'une étude est significative à partir de 5 %.
Generally, a study is considered significant starting from 5%.
Malgré tout, il faut continuer à faire des études.
Nonetheless, we must continue conducting studies.
car il n'est pas possible de savoir si on est dans les 5% ou pas,
because it is impossible to know whether we are within the 5% or not,
donc si l'hypothèse nulle est vraie ou pas.
and thus whether the null hypothesis is true or not.
Petite info en plus.
A small extra fact.
à résultats moyens égaux, plus la population étudiée est grande,
With equal average results, the larger the studied population,
plus la p value est faible, et donc mieux c'est.
the lower the p-value, and thus the better.
Et la force d'une étude de ce type n'est mesurée que par sa p value,
And the strength of a study of this type is measured solely by its p-value,
s'il n'y a pas de biais méthodologiques bien sûr.
provided there are no methodological biases, of course.
C'est juste que plus l'échantillon est grand, plus l'effet qu'on pourra montrer sera
It's just that the larger the sample, the more
subtil. Je suis pas sûr d'avoir tout bien compris, franchement.
subtle the effect we'll be able to demonstrate will be. I'm not sure I fully understood, honestly.
C'est normal, vous pouvez revoir ce passage ou aller voir la vidéo de la statistique
It's normal—you can rewatch this section or check out the 'statistics explained to my cat' video,
expliquée à mon chat, c'est illustré et assez clair.
it's illustrated and quite clear.
Et tu penses pas que t'aurais pu nous le dire plus tôt?
And don't you think you could've told us earlier?
Pourquoi tu t'embêtes à nous expliquer des trucs qui sont déjà sur internet,
Why bother explaining things to us that are already online,
franchement? Je sais que c'est pas des plus efficaces, mais je tiens à ce que ma
honestly? I know it's not the most efficient, but I insist that my
chaîne soit accessible sans connaissance préalable.
channel be accessible without prior knowledge.
Et puis on n'est jamais trop à vulgariser.
Besides, popularization can never be overdone.
Il parle de l'effet placebo là, c'est quoi ce truc?
He's talking about the placebo effect here—what is this thing?
Oui, il faut que j'en parle de ça.
Yes, I need to talk about this.
Souvent, quand on prend un médicament, on se sent mieux immédiatement après la
Often, when we take a medication, we feel better immediately after taking it.
prise. En réalité, le médicament ne fait effet que bien plus tard.
In reality, the medication only takes effect much later.
C'est le corps qui, après la prise, va créer des réactions qui vont réduire les
It's the body that, after ingestion, generates reactions that reduce the
symptômes. Attention,
symptoms. Attention,
ce n'est pas un effet purement psychologique.
It is not a purely psychological effect.
Ces effets sont physiologiques et observables.
These effects are physiological and observable.
Pour limiter l'intervention de l'effet placebo, on fait en sorte que les sujets ne
To limit the intervention of the placebo effect, we ensure that subjects do not
savent pas s'ils sont dans le groupe test ou dans le groupe contrôle,
know whether they are in the test group or the control group,
donc s'ils reçoivent le produit testé ou s'ils reçoivent un produit factice qui n'a
and therefore do not know whether they are receiving the tested product or a sham product that has
pas d'effet. Ça, c'est le simple aveugle.
no effect. This is called single-blinding.
Le double aveugle, c'est quand la personne qui donne le produit ne sait pas s'il
In a double-blind trial, the person administering the treatment does not know whether they are giving
donne un placebo ou un réel produit.
gives a placebo or a real product.
Il n'influence donc pas le sujet, même inconsciemment.
Thus, he does not influence the subject, even unconsciously.
Enfin, si celui qui analyse les résultats ne sait pas non plus qui est dans quel
Finally, if the person analyzing the results also does not know who is in which
groupe, on a dit triple aveugle.
group, it is called triple-blinding.
Ouf, c'était dense.
Phew, that was dense.
Ici, on a vu deux niveaux de preuve: les indices, les études.
Here, we have seen two levels of evidence: indications and studies.
Il nous en reste un troisième: les méta- analyses et le consensus scientifique.
We still have a third: meta-analyses and scientific consensus.
Une méta- analyse rassemble un grand nombre.
A meta-analysis gathers a large number.
pour en faire la synthèse.
to synthesize them.
Comme je le disais dans le premier épisode, c'est l'accumulation d'études qui est
As I said in the first episode, it is the accumulation of studies that is
significative.
significant.
Et bien là non seulement on les accumule, mais en plus on les analyse pour en tirer
And here, not only do we accumulate them, but we also analyze them to draw
les conclusions les plus sûres possibles.
the most reliable conclusions possible.
Notamment on vérifie les protocoles, leur adéquation à la méthode,
Specifically, we check protocols and their suitability for the method,
la présence d'éventuels biais, conflits d'intérêts, on met en place des critères de
the presence of potential biases or conflicts of interest, and establish selection criteria.
sélection. Autant le dire, c'est du solide.
Let’s be clear: this is solid work.
Le consensus scientifique quant à lui est le meilleur niveau de preuve qu'on puisse
Scientific consensus, on the other hand, is the highest level of evidence we can obtain. And it’s easy to see why.
obtenir. Et on comprend bien pourquoi.
And it’s easy to see why.
Les scientifiques d'un domaine sont au courant des études et méta- analyses qui
Scientists in a given field are aware of the studies and meta-analyses published in that field.
sortent dans ce domaine.
studies and meta-analyses published in that field.
Si une grande majorité tombe d'accord, c'est que la conclusion ne fait même pas
If a large majority agrees, it means the conclusion isn’t even debated among the most informed people.
débat parmi les plus informés de tous.
isn’t even debated among the most informed people.
Donc on peut bien lui faire confiance.
So we can confidently trust it.
Je rappelle que même ça, c'est pas une certitude absolue.
I reiterate that even this is not an absolute certainty.
Le consensus scientifique peut se tromper.
The scientific consensus can be wrong.
Mais il se trompe méthodiquement.
But it errs methodically.
Donc il apprend de ses erreurs et se rapproche de plus en plus de la vérité.
So it learns from its mistakes and gets closer and closer to the truth.
Avec tout ça, vous pouvez déjà avoir un avis plus éclairé sur différents sujets.
With all this, you can already form a more informed opinion on various topics.
Le problème, c'est que cette présentation des études que j'ai faite aujourd'hui est
The problem is that this presentation of studies I've done today is
très qualitative.
very qualitative.
On fait un peu ça au doigt mouillé.
We’re doing it somewhat by the seat of our pants.
Mais il existe un moyen mathématique d'évaluer la plausibilité d'une hypothèse en se
But there exists a mathematical method to assess the plausibility of a hypothesis based on the studies
basant sur les études.
to assess the plausibility of a hypothesis.
Mais on verra ça une prochaine fois.
But we’ll cover that next time.
À bientôt, et soyez sages.
See you soon, and behave.