Jedinica 10 / 11

Skeniranje dokaza i zdravstvene tvrdnje: Ispravno čitanje znanosti, izbjegavanje lažnih tvrdnji

Dobici:

  • Sposobnost evaluacije prehrambenih tvrdnji uzimajući u obzir hijerarhiju dokaza i razlikujući korelaciju i uzročnost
  • Sposobnost prepoznavanja izvorne halucinacije umjetne inteligencije i provjere svake reference iz primarnog izvora
  • Sposobnost korištenja umjetne inteligencije ne za pronalaženje izvora, već za ispitivanje i kritičku procjenu izvora

Znanost o prehrani brzo se razvija i stalno se objavljuju nova istraživanja. Profesionalna vrijednost dijetetičara ovisi o njegovoj sposobnosti da uoči istinu u ovoj bujici dokaza, ostane u tijeku i zasnuje svoje tvrdnje na čvrstim temeljima. Istovremeno, nutricionizam je jedno od područja gdje pseudoznanost najviše napreduje: svaki tjedan kruži nova tvrdnja o "čudesnoj hrani", "toksinu", "superhrani". AI može pomoći na oba fronta: sažima znanstvene tekstove, pojednostavljuje složene studije, pomaže vam da preispitate razinu dokaza za tvrdnju. Ali tu leži najopasnija zamka umjetne inteligencije: ona može izmisliti studije koje ne postoje, izmisliti izvore i predstaviti slabe dokaze kao jake. Načelo ove jedinice: koristite AI za procjenu i ispitivanje dokaza, a ne za njihovo pronalaženje; provjerite svaki izvor i svaku tvrdnju iz primarnog izvora.

Hijerarhija dokaza: nisu sve studije jednake

U znanosti moć dokaza tvori piramidu. Snaga se povećava odozdo prema gore:

Razina dokaza

kako to misliš

snaga

Stručno mišljenje / anegdota

Osobno iskustvo, "radilo je kod mog prijatelja"

najslabiji

Serija slučajeva

Promatranje manjeg broja bolesnika

slabi

promatračka studija

Praćenje populacije (korelacija)

srednji

Randomizirano kontrolirano ispitivanje (RCT)

Eksperimentirajte s nasumičnim grupama (uzrok i posljedica)

snažna

Sustavni pregled/meta-analiza

Konsolidirani sažetak napornog rada

najjača

Poznavanje ove hijerarhije je kritično; Budući da se većina tvrdnji u vijestima "ova hrana čini ono" zapravo temelji na slabim opservacijskim studijama. "Korelacija" (dvije stvari koje se pojavljuju zajedno) nije "uzročnost" (jedna uzrokuje drugu): opažanje da osobe koje piju kavu žive dulje ne dokazuje da kava produljuje život. AI ponekad zamagljuje ovu razliku; Morate pojasniti.

Halucinacija izvora umjetne inteligencije

Najpodmuklija pogreška jezičnih modela je što izmišljaju znanstvene studije, imena autora, nazive časopisa i DOI brojeve koji zapravo ne postoje. AI vam može reći uvjerljivom rečenicom: "Prema studiji objavljenoj u Journal of Nutrition 2021. godine..."; taj posao možda nikada neće postojati. Dakle, zlatno pravilo: Ne koristite nijedan izvor koji daje YZ bez potvrde iz primarnog izvora (PubMed, Cochrane, originalni časopis). Korištenje umjetne inteligencije kao tražilice literature profesionalna je pogreška.

Oprez: ako AI-ju kažete "navedi studije koje to podupiru", možete dobiti uvjerljive, ali lažne reference. Ispravna uporaba: dajte AI-ju tekst stvarne studije i pitajte "sažeti ovo / koja su ograničenja ove studije?" je pitati. Vi donesete izvor, AI ga tumači.

Pouzdane smjernice i znanstveni konsenzus

Dijetetičar ne mora skenirati literaturu od nule za svako pitanje; Za većinu kliničkih situacija postoje nacionalne i međunarodne smjernice. Vodiči su redovito ažurirani konsenzusni dokumenti na temelju kojih stručni paneli ocjenjuju i zaključuju brojne studije; na primjer, Türkiye Nutrition Guide (TÜBER), preporuke Svjetske zdravstvene organizacije (WHO), prehrambene smjernice dijabetesa i kardioloških udruga. Kada procjenjujete tvrdnju, prvo se zapitajte "što trenutne smjernice kažu o tome?" ' je pouzdaniji od gubljenja u pojedinačnim studijama; jer je vodič već odvagao korpus dokaza. Ovdje možete koristiti AI na dva načina: za sažetak stvarnog teksta vodiča ili za ispitivanje je li tvrdnja u skladu s općim konsenzusom u vodičima. Ali budite oprezni: podaci imenika u memoriji umjetne inteligencije mogu biti stari ili zbrkani; Uvijek provjerite kod službenog izvora koja je verzija vodiča aktualna i koja je točna preporuka. Prije nego kažete "Znanost kaže ovo", provjerite trenutni konsenzus te znanosti iz stvarnog dokumenta. Vodiči se ažuriraju kako se znanost mijenja; Preporuka od prije tri godine možda je danas revidirana.

Ispravna upotreba umjetne inteligencije u procjeni dokaza

  1. Ti donosiš izvor. Pronađite stvarni članak, sažetak ili vodič; Daj to AI-ju.
  2. Sažmite i pojednostavite. Prevedite složeni tekst na razumljiv jezik — ali usporedite tvrdnje s tekstom.
  3. Dovedite u pitanje ograničenja. "Koje su metodološke slabosti ove studije?" AI je dobra u generiranju kritičnih pitanja.
  4. Utvrdite tvrdnju do razine dokaza. Neka klasificiraju razinu dokaza na kojoj se temelji tvrdnja.
  5. Provjerite iz primarnog izvora. Provjerite svaki problem, svaki rezultat i svaki izvor s izvornikom.

tri mini kućišta

Slučaj 1 — Izmišljeni izvor. Za prezentaciju, dijetetičar kaže AI-u, "dajte 3 studije koje dokazuju dobrobiti povremenog posta." AI daje tri studije, autora i godinu. Dijetetičar pretražuje PubMed: dva od tri uopće ne postoje, jedan je na drugu temu. Da je to stavio u prezentaciju, bio bi mu srušen profesionalni kredibilitet. Ispravan način je bio da sam pronađe stvarne kompilacije i da ih umjetna inteligencija sažme. Lekcija: AI izmišlja resurse; Provjerite svaku referencu.

Slučaj 2 — Zamka korelacija-uzročnost. Članak s naslovom "doručak čini da gubite na težini", na temelju opservacijske studije prema kojoj su "oni koji doručkuju mršaviji". Klijent to pita. Dijetetičar ima AI da sažme studiju i ispita njezina ograničenja; Ispostavilo se da ljudi koji doručkuju općenito žive aktivnije i redovitije, što znači da veza nije uzročno posljedična. Dijetetičar pruža uravnotežene informacije klijentu. Lekcija: promatranje nije uzročnost.

Slučaj 3 — Ispravna uporaba. Dijetetičar pronalazi nedavnu meta-analizu potreba za proteinima (stvarna, iz PubMeda), ali tekst je dug i tehnički. Dajte ga umjetnoj inteligenciji i pitajte "koji je glavni nalaz, uzorak, ograničenja i praktična implikacija?" pita on. AI vjerno sažima tekst. Dijetetičar provjerava sažetak uspoređujući ga s izvornikom i prilagođava ga svojoj praksi. AI je smanjio opterećenje čitanja; izvor i provjera ostala kod dijetetičara.

Predlošci upita koji se mogu kopirati

OBRAZAC SAŽETKA STUDIJE (VI NAVEDITE izvor) Ispod je tekst/sažetak stvarnog znanstvenog rada. Sažmite ovo sa sljedećim naslovima: istraživačko pitanje, metoda/dizajn, uzorak, glavni nalaz, OGRANIČENJA, praktične implikacije. Nemojte dodavati ništa što NIJE u tekstu; pristajanje. Tekst: [...]

OBRAZAC KLASIFIKACIJE RAZINE DOKAZA Za sljedeću tvrdnju: "[tvrdnja]". Razmotrite razinu dokaza na kojoj se obično temelji ova tvrdnja (anegdota / opservacija / RCT / meta-analiza). Navedite postoji li korelacija ili uzročnost. Izvor FAKE; samo analizirati dokaznu snagu tvrdnje.

OBRAZAC KRITIČNOG UPITA Navedite metodološke SLABOSTI i moguće pristranosti (mala veličina uzorka, kratko trajanje, sukob interesa, zbunjujući faktor) sljedećeg sažetka studije. Ne preuveličavajte nalaz; uravnotežena kritika.Sažetak: [...]

PREDLOŽAK PROVJERE STVARNOSTI TVRDNJE Klijent je čuo sljedeću tvrdnju: "[npr. detoksikacijski čaj uklanja toksine]". Iskreno procijenite znanstvenu osnovu ove tvrdnje: što je poznato, što nije poznato, koji su dijelovi lažni/pretjerani. Nacrtajte odmjereno, nezastrašujuće objašnjenje koje ćete ispričati klijentu. Izmišljanje izvora.

Slab upit / Jak upit

Slab upit:

Navedite studije koje dokazuju da đumbir jača imunitet.

Ova želja tjera umjetnu inteligenciju da izmišlja izvore i proizvodi pristranost tražeći jedan način ("dokazivač"). Stižu lažna svjedočanstva.

Snažan upit:

Vaša uloga: pomoćnik za procjenu dokaza; izvor LAŽNO Procijenite tvrdnju "đumbir jača imunitet" uravnoteženo: na kojoj se razini dokaza obično temelji ova tvrdnja, jesu li dokazi jaki ili slabi, korelacija ili uzročnost? Napravite razliku između onoga što je poznato / onoga što je nepoznato. NEMOJTE navoditi stvarne studije (provjerit ću ih u PubMedu); samo analizirati dokaznu snagu tvrdnje.

Drugi prompt zabranjuje lažiranje izvora, zahtijeva uravnoteženu (a ne jednostranu) procjenu i prepušta provjeru ljudima; izlaz je siguran alat za razmišljanje.

Uobičajene greške

  • Zamjena umjetne inteligencije za tražilicu literature: traženje resursa; AI izrađuje reference.
  • Nepotvrđivanje izvora: Korištenje rada koji je pružio AI bez provjere iz primarnog izvora.
  • Zamjena korelacije za uzročnost: Predstavljanje nalaza promatranja kao "ovo čini ono".
  • Ignoriranje razine dokaza: izjednačavanje anegdote s meta-analizom.
  • Jednostrano postavljanje pitanja: Stvaranje pristranosti govoreći "dokazne studije"; uravnotežen problem.
  • Zanemarivanje aktualnosti: Pretpostavka da su stare/zastarjele informacije aktualne; Pogledajte trenutnu verziju vodiča.

Ukratko

Čitanje dokaza i obraćanje pozornosti na zdravstvene tvrdnje temelj su profesionalnog kredibiliteta dijetetičara. AI je moćan pomoćnik za čitanje i ispitivanje u ovom području: sažima stvarne studije, izdvaja ograničenja, analizira razinu dokaza tvrdnji. Ali umjetna inteligencija izmišlja izvore - to je njena najopasnija greška. Uvijek ponesite izvor i provjerite ga iz primarnog izvora; odvojiti korelaciju od uzročnosti; promatrati hijerarhiju dokaza; Preispitajte optužbe na uravnotežen način. AI ubrzava vaše razmišljanje; ali odgovornost za znanost, točnost izvora i poštenje tvrdnje su vaši.

Zadatak aplikacije

Odaberite popularnu prehrambenu tvrdnju (npr. "alkalna dijeta uravnotežuje tijelo" ili "jedenje kasno navečer uzrokuje debljanje"). Dobijte uravnoteženu procjenu od umjetne inteligencije pomoću "predloška za provjeru stvarnosti zahtjeva". Zatim upotrijebite "predložak klasifikacije razine dokaza" da odredite razinu dokaza na kojoj se temelji tvrdnja. Također, svjesno zatražite od AI-ja "popis izvora" i pretražite jednu od referenci koje daje u PubMedu; Vidi je li pravi. Ovaj eksperiment će utjeloviti izvornu halucinaciju.

popis za provjeru

  • [ ] Donio sam izvor; Nisam izmislio referencu na AI.
  • [ ] Potvrdio sam svaki izvor koji je naveo YZ iz primarnog izvora.
  • [ ] Napravio sam razliku između korelacije i uzročnosti.
  • [ ] Tvrdnju sam klasificirao prema hijerarhiji dokaza.
  • [ ] Preispitao sam tvrdnje na uravnotežen (ne jednostran) način.
  • [ ] Provjerio sam kompatibilnost informacija s trenutnim vodičima/kompilacijama.