Unité 3 / 12

Revue de la littérature médicale et résumé des preuves

Gains :

  • Capacité à utiliser l’intelligence artificielle comme outil pour parcourir rapidement une littérature abondante et résumer des termes et des concepts
  • Chaque citation, étude et figure doit être confirmée à partir de l'article réel et du guide actuel, en gérant le risque de sources fabriquées.
  • Capacité à lire de manière critique le résumé, à évaluer le niveau de preuve (méta-analyse, ECR, séries de cas) et les conflits d'intérêts.

La médecine moderne est fondée sur des preuves : les décisions doivent être fondées sur les preuves scientifiques les plus récentes et les plus solides. Mais des millions d’articles sont publiés chaque année ; Il est impossible pour un médecin de tous les lire. L'intelligence artificielle (IA) est ici un puissant outil d'analyse et de synthèse : résumer rapidement un sujet, expliquer des termes, comparer des points de vue opposés, distiller les principales conclusions d'un article en quelques phrases. Mais c’est là qu’apparaît la faiblesse la plus dangereuse de l’IA dans la littérature médicale : l’IA peut inventer (halluciner) des articles, des auteurs et des numéros DOI qui n’existent pas. Dans cette unité, vous apprendrez comment utiliser l’IA comme accélérateur dans la revue de la littérature et comment vérifier chaque source. Règle générale : l'IA recommande des ressources ; Vous confirmez la source à partir de la base de données réelle.

Connaître la hiérarchie des preuves

Toutes les études n’ont pas le même poids. La force de la preuve est considérée comme une pyramide. Au sommet se trouvent les revues systématiques et les méta-analyses (études qui rassemblent et combinent statistiquement de nombreuses études). Il s'agit de l'essai contrôlé randomisé (ECR ; le type d'expérience le plus fiable dans lequel les patients sont divisés en groupes aléatoires). Ensuite, il y a les études de cohorte et cas-témoins, puis les séries de cas et les rapports de cas, et tout en bas se trouvent les opinions d'experts et les études sur les animaux/laboratoires.

Souvent, l’IA ne précise pas ce niveau lorsqu’elle résume une réclamation. La phrase « Ce traitement est efficace » peut être basée sur une méta-analyse ou sur une seule petite série de cas. La différence entre les deux change complètement votre jugement clinique. Se demander donc sur quel niveau de preuve chaque affirmation est basée est la première étape de la lecture du mémoire d’IA.

Indice : demandez à l’IA « sur quel niveau de preuve cette affirmation est-elle basée ? » demander. Mais vérifiez également la réponse ; L’IA peut également attribuer à tort le niveau de preuve. L'évaluation finale se fait par la lecture de la source primaire et du guide actuel.

Étape par étape : Résumé de la littérature en sécurité grâce à l'IA

  1. Clarifiez la question. Le cadre PICO fonctionne : Patient/Population, Intervention, Comparaison, Résultat.
  2. Demandez un résumé des concepts et des termes à AI. Pour comprendre le sujet et trouver les bons termes de recherche.
  3. Recherchez toutes les ressources fournies par l'IA dans la base de données réelle. PubMed, Cochrane, sites de lignes directrices actuelles.
  4. Lisez l'article existant à partir de la source principale. Le résumé de l’IA et la conclusion réelle de l’article sont-ils les mêmes ?
  5. Tenez compte du niveau de preuve et du conflit d’intérêts. Qui l’a financé, combien de personnes faisaient partie de l’échantillon, le résultat est-il significatif ?
  6. Comparez avec les directives actuelles. Soyez prudent si l'étude individuelle va à l'encontre du manuel.

trois mini-cases

Cas 1 — Source fabriquée. Un résident demande 5 ressources à l'IA pour soigner une vascularite rare. L'IA est très bien formatée, donnant 5 citations avec DOI. L'assistant les recherche tous sur PubMed : 3 n'existent pas du tout, 1 est sur un sujet différent, 1 seul est réel. Si la confirmation n'avait pas été faite, les 4 mauvaises sources auraient été incluses dans une présentation de séminaire.

Cas 2 — Confusion du niveau de preuve. Un médecin lit dans le résumé de l’IA qu’un nouveau supplément est « efficace ». Lorsqu'il consulte la source principale, il constate que l'allégation est basée sur une étude non contrôlée et soutenue par le fabricant auprès de 24 personnes. La directive actuelle indique qu’il n’existe aucune preuve claire. Le médecin évalue la recommandation selon le guide et non selon une seule étude.

Cas 3 — Utilisation correcte et rapide. Un médecin reçoit un résumé conceptuel de l'IA pour comprendre le changement actuel dans les critères de diagnostic d'une maladie ; En bref, il trouve les bons termes de recherche et atteint la section correspondante du guide actuel. Un appel de 40 minutes est réduit à 10 minutes. L’IA a ouvert la voie ; Le texte d’orientation a pris la décision.

Tableau de validation des sources

donné par l'IA

chemin de vérification

Risque

Titre de l'article/auteur

Base de données de recherche (PubMed)

Peut-être que c'est faux

Numéro DOI

Résoudre via doi.org

Peut être invalide/fabriqué

Résultat numérique (%, HR)

Lire la conclusion de l'article

Peut être transféré de manière incorrecte

"Le guide suggère"

Ouvrir le texte officiel du guide actuel

Il est peut-être obsolète

Niveau de preuve

Voir le type d'étude à partir de la source principale

Peut être attribué à tort

Quatre modèles copiables

Tâche : Structurer la question clinique suivante dans le cadre PICO et fournir un RÉSUMÉ conceptuel pour ma compréhension du sujet. NE PAS inventer la source ; suggérer quels termes et dans quelles bases de données je devrais plutôt chercher.Question : [...]

Tâche : Énumérez CHAQUE allégation médicale dans le résumé de l'IA ci-dessous et pour chacune : - sur quel niveau de preuve serait-elle basée (méta-analyse/ECR/série de cas) ? - notez « doit être vérifié à partir de la source primaire » Fabrication de la source ; cochez uniquement les points à vérifier.Résumé : [...]

Tâche : Résumer les principales conclusions de cet article (texte ci-dessous), en simplifiant la taille de l'échantillon, le critère d'évaluation principal et les limites. N'ajoutez pas vos propres connaissances ; se fier uniquement au texte fourni.Texte : [...]

Tâche : Produire une liste de contrôle pour COMPARER l'affirmation suivante avec les orientations actuelles : quelle orientation, quelle section, quelle classe de recommandation, y a-t-il un conflit d'intérêt ? N'inventez pas le texte du guide ; donner des points de contrôle.Réclamation : [...]

Invite faible/Invite forte

Faible : "Quel est le meilleur traitement pour cette maladie, donnez une source."

Strong : « Structurer la question de la supériorité du traitement Y sur Z au cas où

Dans l'invite puissante, l'IA ne peut pas faire correspondre les ressources et sa tâche est limitée à l'analyse et à la direction.

Erreurs courantes

  • Confondre une source fabriquée avec de la vraie. Chaque citation doit être recherchée dans la base de données.
  • Ignorer le niveau de preuve. Méta-analyse et présentation de cas n’ont pas le même poids.
  • Remplacement du résumé IA par l'article. Le résumé peut mal citer ; la source principale est lue.
  • Garder l'œuvre unique au-dessus du guide. Les lignes directrices prennent en compte la totalité des preuves.
  • Contourner les conflits d’intérêts. Celui qui le finance peut influencer le résultat.

Véhicules accessibles (RAG) et leurs limites

Ces dernières années, les outils médicaux utilisant la « génération d'accès » (RAG en anglais ; méthode par laquelle le modèle cite la véritable base documentaire lors de la génération de réponses) se sont généralisés. Ces outils sont plus fiables qu'un modèle en langage simple, car ils relient la réponse à une source réelle et affichent une citation. Pourtant, ce n’est pas aveuglément digne de confiance. Deux risques subsistent : premièrement, le pool de ressources analysé par l'outil peut ne pas être à jour ou complet ; Deuxièmement, le modèle peut mal interpréter la source qu’il cite (le véritable article, mais sa conclusion est déformée). En d’autres termes, ce n’est pas parce qu’il « cite une source » que vous devez lire cette source.

L'utilisation correcte est de considérer la citation vers laquelle ces outils pointent non pas comme un raccourci, mais comme le début de la vérification : ouvrez l'article cité, voyez s'il dit réellement cette conclusion, comparez-le avec le guide actuel. Les outils accessibles réduisent mais n’éliminent pas le fardeau de la vérification.

Astuce : Même un outil d’IA « citant » peut produire des résumés incorrects. Vérifiez toujours la citation citée auprès de la source principale ; L’existence du devis ne garantit pas qu’il soit correctement cité.

En résumé

L’IA apporte une rapidité fulgurante à la littérature médicale : résume les concepts, explique les termes, donne une direction à la recherche. Mais il peut fabriquer des sources et attribuer de manière erronée le niveau de preuve. Recherchez chaque article dans la base de données actuelle, lisez-le à partir de la source principale, évaluez le niveau de preuve et le conflit d'intérêts, comparez-le aux directives actuelles. Le briefing sur l’IA est un début ; La base de votre décision en matière de preuves est toujours une source primaire et un guide vérifiés.

Tâche de candidature

Choisissez une question clinique actuelle qui vous intéresse. Demandez un résumé PICO et 5 ressources à AI. Combien de ces 5 sources se trouvent réellement sur PubMed ? Combien d’entre eux ont le même résultat que ce que dit l’IA ? Notez le niveau de preuve pour chacun et comparez-le avec la recommandation actuelle sur le même sujet. S’il s’avère qu’il s’agit d’une source fabriquée, notez comment vous l’avez remarqué.

liste de contrôle

  • [ ] J'ai structuré la question avec PICO.
  • [ ] J'ai reçu un briefing conceptuel et une direction de recherche d'AI.
  • [ ] J'ai recherché dans la base de données réelle chaque source.
  • [ ] J'ai lu des articles existants provenant de sources primaires.
  • [ ] J'ai évalué le niveau de preuve et le conflit d'intérêts.
  • [ ] J'ai comparé les affirmations avec les directives actuelles.
  • [ ] J'ai éliminé les sources fabriquées et je les ai notées.