Comprendre les niveaux de preuve
Toutes les études ne se valent pas. Un essai randomisé sur des centaines de personnes et une observation sur une poignée de patients peuvent arriver à la même conclusion, mais pas avec la même solidité. Pour vous aider à faire la différence d'un coup d'œil, chaque étude de notre veille scientifique reçoit un niveau de preuve, de 1 (le plus solide) à 5.
Nous utilisons l'échelle du Centre for Evidence-Based Medicine de l'université d'Oxford (version 2011), une référence internationale pour classer une étude isolée.
Deux types d'études absents de l'échelle d'Oxford 2011 ont été classés selon leur nature : la randomisation mendélienne au niveau 3, avec les autres études observationnelles, et les revues narratives au niveau 5, comme les avis d'experts dans les versions précédentes de l'échelle.
Ce que la veille retient, et pourquoi
Avant d'être classée, chaque étude passe un tri. Ces règles expliquent pourquoi une étude dont vous avez entendu parler peut ne pas figurer sur une fiche :
- Uniquement des études menées chez l'homme. Les résultats obtenus sur des cellules ou des animaux sont une étape de la recherche, pas une preuve d'effet chez l'homme : le plus souvent, ils ne se confirment pas. Ils restent présents indirectement à travers les revues mécanistiques, classées au niveau 5.
- Le sujet de la fiche doit être au cœur de l'étude. Une étude sur le régime méditerranéen ne figure pas sur la fiche de chacun des aliments qui le composent : elle est rangée sur la fiche du régime.
- Pour les nutriments, compléments et plantes, seule la prise par voie orale compte. Les injections, perfusions ou applications sur la peau posent d'autres questions.
- Une prise de sang seule ne suffit pas. Une étude qui associe un taux sanguin bas de vitamine D à une maladie ne dit pas si en prendre aide : nous retenons les études qui portent sur un apport ou une supplémentation.
- Pas d'articles de méthode. La validation d'un questionnaire ou d'une technique de dosage ne mesure aucun effet sur la santé.
Les cinq niveaux
Méta-analyses, revues systématiques et revues parapluies d'essais randomisés
La preuve la plus solide : plusieurs essais randomisés analysés ensemble, ce qui limite le poids du hasard et des biais d'une étude isolée.
Essais randomisés contrôlés, y compris les essais croisés
Les participants sont répartis au hasard entre les groupes : c'est la meilleure façon de tester un lien de cause à effet dans une seule étude.
Études de cohorte, essais non randomisés, randomisation mendélienne, méta-analyses d'études observationnelles
Des données humaines utiles, souvent sur de grands effectifs et de longues durées, mais qui montrent des associations : d'autres facteurs peuvent expliquer le lien observé.
Études transversales, cas-témoins, études pilotes sans groupe témoin, séries de cas, cas cliniques
Des signaux à explorer : photographie à un instant donné, comparaison a posteriori ou très petit nombre de personnes.
Revues narratives, raisonnements mécanistiques
Des synthèses ou des hypothèses qui aident à comprendre un mécanisme, sans apporter de nouvelles données mesurées chez l'humain.
Notre échelle et celle de la HAS
Sous chaque étude, nous indiquons aussi un équivalent approximatif dans la grille de la Haute Autorité de santé, qui classe les études en quatre niveaux :
| Notre niveau | Types d'études | Équivalent HAS |
|---|---|---|
| 1 | Méta-analyses et revues systématiques d'essais randomisés | Niveau 1 |
| 2 | Essais randomisés contrôlés | Niveau 1, ou 2 si l’essai est abaissé |
| 3 | Cohortes, essais non randomisés, randomisation mendélienne, méta-analyses d'études observationnelles | Niveau 2 |
| 4 | Cas-témoins, études transversales, séries de cas, cas cliniques | Niveau 3 (cas-témoins) ou 4 |
| 5 | Revues narratives, raisonnements mécanistiques | Sans équivalent |
Attention aux faux amis : un même chiffre n'a pas le même sens d'une échelle à l'autre. Une étude de cohorte bien menée est classée niveau 3 chez nous, et niveau 2 dans la grille de la HAS.
L'équivalent HAS est déduit automatiquement du type d'étude. Pour les essais randomisés, la HAS distingue les essais « de forte puissance » (niveau 1) et « de faible puissance » (niveau 2), sans seuil chiffré. Le calcul de puissance figurant rarement dans le résumé, nous retenons le niveau 1 pour les essais sans défaut relevé, et le niveau 2 pour les essais abaissés selon les règles ci-dessous. C'est une approximation : seule la lecture de l'article complet permet de trancher. Hormis cette règle propre aux essais, l'équivalent HAS dépend du type d'étude et non de nos ajustements : une méta-analyse de cohortes abaissée chez nous, par exemple, reste équivalente au niveau 2 de la HAS.
Les ajustements
Le type d'étude fixe un niveau de départ. Ce niveau peut être abaissé d'un cran (signalé par une flèche ↓) lorsque le résumé révèle un défaut majeur :
- un essai portant sur moins de 30 participants ;
- un essai sans groupe témoin ni placebo, alors qu'il en faudrait un ;
- des résultats explicitement très imprécis ou incohérents, par exemple une forte hétérogénéité entre les études d'une méta-analyse.
Le motif de chaque ajustement est indiqué sous l'étude. L'échelle d'Oxford permet aussi de relever d'un cran une étude dont l'effet est très important : nous ne le faisons pas, car en nutrition ces effets spectaculaires sont presque inexistants, et ce relèvement automatique produisait surtout des erreurs.
Une étude qui ne trouve aucun effet n'est jamais pénalisée : l'absence d'effet est un résultat aussi valable qu'un autre.
Ce que le niveau ne dit pas
Le niveau de preuve mesure la solidité de la méthode, pas le sens du résultat. Une étude de niveau 1 peut conclure qu'un aliment n'a aucun effet ; une étude de niveau 5 n'est pas fausse, elle apporte simplement peu de preuve directe.
Il ne dit pas non plus si le produit testé correspond exactement à l'aliment de la fiche. Un essai sur un extrait concentré de curcuma reste un essai randomisé, mais ses résultats ne s'appliquent pas forcément au curcuma en poudre de votre cuisine. Pensez à lire le résumé.
Comment le classement est établi
Le niveau est attribué automatiquement, à partir du titre et du résumé de chaque étude, par une analyse assistée par intelligence artificielle qui suit des règles fixes et identiques pour toutes les études. Les seuils chiffrés, comme celui des 30 participants, sont appliqués mécaniquement.
Un résumé ne contient pas tous les détails d'une étude : ce classement est une estimation, utile pour s'orienter, mais qui ne remplace pas la lecture de l'article complet. Chaque étude renvoie vers sa source originale.
Et dans nos articles ?
Nos articles de synthèse vont plus loin : ils évaluent l'ensemble des études disponibles sur un effet donné, selon le système international GRADE, et attribuent un grade de A à D à chaque conclusion.
Les informations de cette page sont fournies à titre informatif et éducatif uniquement. Elles ne constituent pas un avis médical, un diagnostic ou une recommandation de traitement, et ne remplacent pas la consultation d'un professionnel de santé qualifié.