Jednostka 10 / 11

Skanowanie dowodów i oświadczenia zdrowotne: prawidłowe czytanie nauki, unikanie fałszywych twierdzeń

Zyski:

  • Umiejętność oceny oświadczeń żywieniowych poprzez rozważenie hierarchii dowodów i rozróżnienie między korelacją a związkiem przyczynowym
  • Umiejętność rozpoznawania halucynacji źródłowych sztucznej inteligencji i weryfikowania każdego odniesienia z pierwotnego źródła
  • Umiejętność wykorzystania sztucznej inteligencji nie do wyszukiwania źródeł, ale do kwestionowania i krytycznej oceny źródła

Nauka o żywieniu rozwija się szybko i stale publikowane są nowe badania. Wartość zawodowa dietetyka zależy od tego, czy w natłoku dowodów potrafi dostrzec prawdę, być na bieżąco i opierać swoje twierdzenia na solidnych podstawach. Jednocześnie żywienie jest jednym z obszarów, w którym pseudonauka rozwija się najbardziej: co tydzień krąży nowe stwierdzenie o „cudownym jedzeniu”, „toksynach” i „superżywności”. Sztuczna inteligencja może pomóc na obu frontach: podsumowuje teksty naukowe, upraszcza złożone badania, pomaga kwestionować poziom dowodów danej tezy. Ale tu właśnie kryje się najniebezpieczniejsza pułapka sztucznej inteligencji: może ona fabrykować badania, które nie istnieją, wymyślać źródła i przedstawiać słabe dowody jako mocne. Zasada tej jednostki: używaj sztucznej inteligencji do oceny i kwestionowania dowodów, a nie do ich znajdowania; weryfikuj każde źródło i każde twierdzenie ze źródła pierwotnego.

Hierarchia dowodów: nie wszystkie badania są sobie równe

W nauce siła dowodów tworzy piramidę. Moc wzrasta od dołu do góry:

Poziom dowodów

Co masz na myśli?

moc

Opinia eksperta / anegdota

Osobiste doświadczenie: „u mojego znajomego zadziałało”

najsłabszy

Seria przypadków

Obserwacja małej liczby pacjentów

słaby

badanie obserwacyjne

Monitorowanie populacji (korelacja)

średni

Randomizowane badanie kontrolowane (RCT)

Eksperymentuj z losowymi grupami (przyczyna i skutek)

silny

Przegląd systematyczny/metaanaliza

Skonsolidowane podsumowanie ciężkiej pracy

najsilniejszy

Znajomość tej hierarchii jest kluczowa; Ponieważ większość twierdzeń w wiadomościach, że „ta żywność to robi” opiera się w rzeczywistości na słabych badaniach obserwacyjnych. „Korelacja” (dwie rzeczy występujące razem) nie jest „przyczyną” (jedna powoduje drugą): obserwacja, że ​​osoby pijące kawę żyją dłużej, nie dowodzi, że kawa wydłuża życie. Sztuczna inteligencja czasami zaciera to rozróżnienie; Musisz wyjaśnić.

Halucynacje źródłowe AI

Najbardziej podstępnym błędem modeli językowych jest fabrykowanie badań naukowych, nazwisk autorów, nazw czasopism i numerów DOI, które w rzeczywistości nie istnieją. AI może powiedzieć Ci w przekonującym zdaniu: „Według badania opublikowanego w Journal of Nutrition w 2021 r.”; ta praca może nigdy nie istnieć. Zatem złota zasada: nie korzystaj z żadnego źródła podanego przez YZ bez potwierdzenia go w źródle pierwotnym (PubMed, Cochrane, czasopismo oryginalne). Używanie AI jako wyszukiwarki literatury jest błędem zawodowym.

Uwaga: jeśli powiesz AI „wypisz badania, które to potwierdzają”, możesz uzyskać przekonujące, ale fałszywe odniesienia. Poprawne użycie: przekaż AI tekst prawdziwego badania i zapytaj „podsumuj to / jakie są ograniczenia tego badania?” jest zapytać. Ty przynosisz źródło, AI je interpretuje.

Zaufane wytyczne i konsensus naukowy

Dietetyk nie musi przy każdym pytaniu przeglądać od zera literatury; Istnieją krajowe i międzynarodowe wytyczne dotyczące większości sytuacji klinicznych. Przewodniki to regularnie aktualizowane dokumenty konsensusowe, na podstawie których panele ekspertów oceniają i wyciągają wnioski z licznych badań; na przykład Türkiye Nutrition Guide (TÜBER), zalecenia Światowej Organizacji Zdrowia (WHO), wytyczne żywieniowe stowarzyszeń diabetologicznych i kardiologicznych. Oceniając roszczenie, najpierw zadaj sobie pytanie: „Co mówią na ten temat aktualne wytyczne?” ' jest bardziej niezawodny niż zagubienie się w indywidualnych badaniach; ponieważ przewodnik rozważył już materiał dowodowy. Możesz użyć sztucznej inteligencji na dwa sposoby: do podsumowania faktycznego tekstu przewodnika lub do zakwestionowania, czy twierdzenie jest zgodne z ogólnym konsensusem zawartym w przewodnikach. Ale bądź ostrożny: informacje katalogowe w pamięci AI mogą być stare lub niejasne; Zawsze sprawdzaj w oficjalnym źródle, która wersja przewodnika jest aktualna i jakie są dokładne zalecenia. Zanim powiesz „Nauka tak mówi”, sprawdź aktualny konsensus tej nauki na podstawie faktycznego dokumentu. Przewodniki są aktualizowane wraz ze zmianami w nauce; Zalecenie sprzed trzech lat mogło zostać dzisiaj zmienione.

Prawidłowe wykorzystanie sztucznej inteligencji przy ocenie dowodów

  1. Podaj źródło. Znajdź aktualny artykuł, podsumowanie lub przewodnik; Daj to AI.
  2. Podsumuj i uprość. Przetłumacz skomplikowany tekst na zrozumiały język, ale porównaj twierdzenia z tekstem.
  3. Kwestionuj ograniczenia. „Jakie są słabości metodologiczne tego badania?” Sztuczna inteligencja jest dobra w generowaniu krytycznych pytań.
  4. Ustal żądanie do poziomu dowodów. Niech sklasyfikowają poziom dowodów, na których opiera się twierdzenie.
  5. Sprawdź na podstawie głównego źródła. Sprawdź każdy problem, każdy wynik i każde źródło za pomocą oryginału.

trzy mini etui

Przypadek 1 – sfabrykowane źródło. W ramach prezentacji dietetyk mówi AI: „podać 3 badania, które dowodzą korzyści płynących z okresowego postu”. AI podaje trzy badania, autora i rok. Dietetyk szuka w PubMed: dwa z trzech w ogóle nie istnieją, jeden jest na inny temat. Gdyby umieścił to w prezentacji, jego wiarygodność zawodowa zostałaby zniszczona. Właściwym sposobem było znalezienie samych kompilacji i zlecienie ich podsumowania przez sztuczną inteligencję. Lekcja: AI wymyśla zasoby; Sprawdź każde odniesienie.

Przypadek 2 — Pułapka korelacyjno-przyczynowa. Artykuł prasowy zatytułowany „Śniadanie powoduje utratę wagi”, oparty na badaniu obserwacyjnym, z którego wynika, że ​​„ci, którzy jedzą śniadanie, są szczuplejsi”. Klient o to pyta. Dietetyk każe AI podsumować badanie i zakwestionować jego ograniczenia; Okazuje się, że osoby jedzące śniadania na ogół żyją bardziej aktywnie i regularnie, co oznacza, że ​​związek ten nie ma charakteru przyczynowego. Dietetyk przekazuje klientowi wyważone informacje. Lekcja: obserwacja nie jest przyczyną.

Przypadek 3 – Prawidłowe użycie. Dietetyk znajduje najnowszą metaanalizę zapotrzebowania na białko (prawdziwą, z PubMed), ale tekst jest długi i techniczny. Przekaż to sztucznej inteligencji i zapytaj „jakie jest główne odkrycie, próbka, ograniczenia i praktyczne implikacje?” pyta. AI wiernie podsumowuje tekst. Dietetyk weryfikuje podsumowanie porównując je z oryginałem i dostosowuje do swojej praktyki. AI zmniejszyła obciążenie związane z czytaniem; źródło i weryfikacja pozostały u dietetyka.

Kopiowalne szablony podpowiedzi

SZABLON STRESZCZENIA BADANIA (POdajesz źródło) Poniżej znajduje się tekst/streszczenie aktualnej pracy naukowej. Podsumuj to za pomocą następujących nagłówków: pytanie badawcze, metoda/projekt, próbka, główne ustalenie, OGRANICZENIA, implikacje praktyczne. Nie dodawaj niczego, czego NIE ma w tekście; dopasowywanie. Tekst: [...]

WZÓR KLASYFIKACJI POZIOMU DOWODU Dla następującego oświadczenia: „[roszczenie]”. Rozważ poziom dowodów, na których zazwyczaj opiera się to twierdzenie (anegdotyczne / obserwacyjne / RCT / metaanaliza). Określ, czy istnieje korelacja, czy przyczynowość. Źródło FAŁSZYWE; wystarczy przeanalizować siłę dowodową roszczenia.

SZABLON KRYTYCZNEGO ZAPYTANIA Wymień metodologiczne SŁABOŚCI i możliwe błędy systematyczne (mała wielkość próby, krótki czas trwania, konflikt interesów, czynnik zakłócający) poniższego podsumowania badania. Nie przesadzaj z odkryciem; wyważona krytyka.Podsumowanie: [...]

SZABLON KONTROLI RZECZYWISTOŚCI Klient usłyszał następujące stwierdzenie: „[np. herbata detoksykująca usuwa toksyny]”. Uczciwie oceń podstawę naukową tego twierdzenia: co wiadomo, co nie wiadomo, które części są fałszywe/przesadzone. Przygotuj wyważone, nie przerażające wyjaśnienie, które należy przekazać klientowi. Wyrób źródłowy.

Słaba zachęta/silna zachęta

Słaba zachęta:

Wymień badania potwierdzające, że imbir wzmacnia odporność.

To pragnienie popycha sztuczną inteligencję do fabrykowania źródeł i powoduje stronniczość, zadając pytanie w jeden sposób („dowód”). Pojawiają się fałszywe zeznania.

Potężny monit:

Twoja rola: asystent oceny dowodów; źródło FAŁSZ Oceń twierdzenie „imbir zwiększa odporność” w sposób zrównoważony: na jakim poziomie dowodów zazwyczaj opiera się to twierdzenie, czy dowody są mocne czy słabe, korelacja czy związek przyczynowy? Dokonaj rozróżnienia między tym, co znane, a tym, co nieznane. NIE odwołuj się do rzeczywistych badań (zweryfikuję je z PubMed); wystarczy przeanalizować siłę dowodową roszczenia.

Drugi podpowiedź zabrania fabrykowania źródeł, wymaga wyważonej (a nie jednostronnej) oceny i pozostawia weryfikację ludziom; wyniki są bezpiecznym narzędziem myślenia.

Typowe błędy

  • Mylenie sztucznej inteligencji z wyszukiwarką literatury: proszenie o zasoby; AI tworzy referencje.
  • Niepotwierdzanie źródła: korzystanie z pracy dostarczonej przez sztuczną inteligencję bez weryfikacji jej w źródle pierwotnym.
  • Mylenie korelacji z przyczynowością: przedstawianie wyników obserwacji jako „to robi tamto”.
  • Ignorowanie poziomu dowodów: utożsamianie anegdoty z metaanalizą.
  • Pytanie jednostronne: tworzenie uprzedzeń poprzez powiedzenie „badania potwierdzające”; zrównoważony problem.
  • Zaniedbywanie aktualności: Zakładanie, że stare/nieaktualne informacje są aktualne; Zobacz aktualną wersję poradników.

Podsumowując

Czytanie dowodów i zwracanie uwagi na oświadczenia zdrowotne to podstawa wiarygodności zawodowej dietetyka. AI to potężny asystent czytania i dociekania w tej dziedzinie: podsumowuje rzeczywiste badania, wydobywa ograniczenia, analizuje poziom dowodów twierdzeń. Ale sztuczna inteligencja fabrykuje źródła – to jest jej najniebezpieczniejszy błąd. Zawsze przynieś źródło i zweryfikuj je na podstawie pierwotnego źródła; oddzielić korelację od przyczynowości; przestrzegać hierarchii dowodów; Kwestionuj zarzuty w sposób wyważony. AI przyspiesza myślenie; ale odpowiedzialność za naukę, dokładność źródła i uczciwość twierdzeń spoczywają na Tobie.

Zadanie aplikacji

Wybierz popularne oświadczenie żywieniowe (np. „dieta alkaliczna równoważy organizm” lub „jedzenie późno w nocy powoduje przyrost masy ciała”). Uzyskaj wyważoną ocenę od sztucznej inteligencji za pomocą „szablonu sprawdzenia rzeczywistości roszczenia”. Następnie użyj „szablonu klasyfikacji poziomu dowodów”, aby określić poziom dowodów, na których opiera się twierdzenie. Świadomie poproś AI o „listę źródeł” i przeszukaj jedno z podanych przez nią źródeł w PubMed; Zobacz, czy to prawda. Ten eksperyment będzie ucieleśnieniem halucynacji źródłowej.

lista kontrolna

  • [ ] Przyniosłem źródło; Nie wymyśliłem odniesienia do AI.
  • [ ] Potwierdziłem każde źródło podane przez YZ ze źródła pierwotnego.
  • [ ] Rozróżniłem korelację i przyczynowość.
  • [ ] Sklasyfikowałem roszczenie zgodnie z hierarchią dowodów.
  • [ ] Zakwestionowałem te twierdzenia w sposób wyważony (a nie jednostronny).
  • [ ] Sprawdziłem zgodność informacji z aktualnymi przewodnikami/zestawieniami.