Dobički:
- Sposobnost uporabe umetne inteligence pri kartiranju literature, skeniranju konceptov in določanju prednosti branja za obvladovanje tveganja izmišljenih virov (halucinacije)
- Sposobnost vzpostavitve toka preverjanja, ki potrdi vsako navedbo, ugotovitev in trditev o velikosti učinka iz primarnega vira
- Sposobnost razlikovanja ravni dokazov (meta-analiza, RCT, primer) in tehtanja povzetka AI glede na hierarhijo dokazov
Psihologija je poklic, ki temelji na dokazih: raziskovalni dokazi nam povedo, ali intervencija deluje, ne pa »tako se meni samo zdi«. Ko želi strokovnjak ostati na tekočem, napisati diplomsko nalogo ali izbrati pravi pristop k primeru, se obrne na literaturo. Literature pa je ogromno; Vsako leto je objavljenih na desettisoče člankov. Umetna inteligenca (AI) je tu izjemen pospeševalnik: definira koncept, preslika področje, predlaga, kateri članek bi morali najprej prebrati, poenostavi kompleksno besedilo. Toda v tem je najnevarnejša značilnost AI v literaturi: izdeluje neobstoječe vire. V tej enoti se boste naučili, kako AI narediti pospeševalnik v literaturi, kako delati, ne da bi se ujeli v past izmišljenih virov (halucinacije).
Kaj počne AI v literaturi, kaj sestavlja?
Književne naloge, kjer je umetna inteligenca močna: razlaga koncepta v preprostem jeziku; povzeti glavne razprave na nekem področju; narediti besedilo berljivo; predlagati ključne besede in iskalno strategijo; povzetek članka (ko podajate besedilo); primerjanje različnih pogledov. Pri teh AI zmanjša ure branja na minute.
Stvari, ki jih sestavlja AI: citati (viri, ki so videti popolni, vendar ne obstajajo, vključno z avtorjem, letom, revijo, številko DOI); statistika (resnične številke, kot so velikost učinka, velikost vzorca, p-vrednost); ugotovitve (študija trdi, da je "to ugotovila", čeprav v resnici ni). To je zato, ker umetna inteligenca ni iskalnik, temveč »ugibalec verjetnih besed«: ustvari najverjetnejšo obliko navedbe, ne da bi preveril njeno točnost.
Pozor: Vsak citat, ki ga poda AI, ni veljaven, ne da bi ga preverili iz primarnega vira (samega članka). Celo na videz popoln DOI je lahko lažen. Vedno je bolje reči "Nisem našel" kot "Navedel sem napačen vir."
Hierarhija dokazov: vse ugotovitve niso enake
Ko AI povzema ugotovitev, vam ne pove njene dokazne moči. Vendar pa obstaja hierarhija dokazov. Pri tehtanju trditve je bistveno vedeti, na kakšni vrsti dokazov temelji.
Raven dokazov
kaj misliš
moč
Metaanaliza / sistematični pregled
Statistična kombinacija več študij
najvišja
Randomizirano kontrolirano preskušanje (RCT)
Eksperiment, pri katerem so udeleženci razdeljeni v naključne skupine
visoka
Longitudinalna/prečna študija
Opazovalno, neeksperimentalno
srednje
Serija primerov / poročilo o primeru
Opis enega ali več primerov
nizka
Strokovno mnenje / teoretično pisanje
Več interpretacij kot dokazov
najnižja
Ko vam umetna inteligenca reče "raziskave kažejo ...", bi moralo biti vaše prvo vprašanje: Katera vrsta raziskave? Ugotovitev metaanalize nima enake teže kot ugotovitev posameznega poročila o primeru.
Korak za korakom: Varen pretok literature, ki ga poganja AI
- Naj AI razloži koncept. Če želite hitro preiti na bistvo, prosite AI za preprost povzetek in ključne koncepte. (To je začetnik, ne vir.)
- Nastavite iskalno strategijo. Prosite AI, da predlaga ključne besede, sinonime in iskalni niz; uporabite ga v resničnih bazah podatkov (akademski iskalniki, arhivi revij).
- Sami poiščite prave vire. Pridobite članke iz recenziranih baz podatkov. Uporabite naslove, ki jih predlaga umetna inteligenca, kot namige za iskanje, ne kot citate.
- Povzemite besedilo v AI. Predajte besedilo dejanskega članka, ki ste ga našli, AI in prosite za povzetek/primerjavo. AI si ne izmišljuje več stvari, ker ima pravo besedilo.
- Potrdite vsako številko in ugotovitev. AI primerja velikost učinka v izvlečku z dejansko vrednostjo v besedilu.
- Označite raven dokazov. Ob vsaki ugotovitvi napišite vrsto dokaza.
Namig: uporabljajte AI v literaturi na dva različna načina: »sugestivno brez vira« (razlaga koncepta, iskalna ideja) in »povzematelj vira« (ko podajate besedilo). Slednje je varno, ker AI deluje iz besedila, ki ga posredujete, ne iz lastnega pomnilnika.
trije mini kovčki
Primer 1 – Epidemija lažnega pripisovanja. Podiplomski študent zahteva navedbo AI za poglavje s 15 viri o anksioznih motnjah. AI ponuja vse v formatu APA. Ko študent preveri, ugotovi, da 6 od 15 virov dejansko ne obstaja (40 %), 3 pa so dodeljeni napačni reviji. Torej je polovica seznama neuporabna. Lekcija: dodeljevanje izvira iz resnične baze podatkov, ne iz umetne inteligence.
2. primer – pravilna uporaba. Zdravnik daje besedilo PDF 4 resničnih metaanaliz AI eno za drugo in reče "v tabeli navedite številko vzorca, velikost glavnega učinka in omejitev vsake." AI skrči 4 30-stranske članke v primerjalno tabelo v 10 minutah. Zdravnik vsako številko potrdi z besedilom; Vsi se izkažejo za pravilne, ker je AI delal iz danega besedila, ne iz svojega spomina.
Primer 3 – past ravni dokazov. Strokovnjak vpraša AI: "Ali terapija X deluje?" vpraša. AI pravi "da, študije to podpirajo" in šteje štiri "študije." Ko ga strokovnjak pregleda, vidi, da so trije en sam primer, eden pa objava na blogu; Ni niti enega RCT. Čeprav se trditev morda zdi formalno "dokazana", je njena dokazna moč zelo šibka.
Pozivi in predloge, ki jih je mogoče kopirati
To temo sem šele začel. BREZ USTVARJANJA VIROV, dajte mi samo konceptualni uvod: osnovne koncepte, glavne razprave o tem področju in seznam ključnih besed + sinonimov, ki jih lahko uporabim pri iskanju. Pripisovanje; Če je zahtevana navedba avtorstva, recite »sami poiščite vir«. Zadeva: [zadeva]
Spodaj prilepim besedilo dejanskega članka. Delajte samo s tem besedilom, ne dodajajte zunanjih informacij. Izvlecite naslednje: raziskovalno vprašanje, metoda, vzorec (n), glavna ugotovitev in velikost učinka, omejitve, raven dokazov. Besedilo: [besedilo članka]
Spodaj je besedilo 3 člankov. Vnesite jih v primerjalno tabelo z naslednjimi stolpci: avtor-leto, vzorec, metoda, glavna ugotovitev, raven dokazov, omejitev. Delajte samo iz danih besedil, ne dodajajte virov. Besedila: [besedila]
Navedite vsako numerično trditev (n, p, velikost učinka, odstotek) v tem besedilu v ločeni vrstici, da jo lahko potrdim z izvirnim člankom. Ne dodajajte številk, ki jih ne morete sami preveriti. Besedilo: [povzetek]
Šibek poziv/močan poziv
Šibek poziv: "Navedite 10 akademskih virov o učinkovitosti kognitivno-vedenjske terapije pri depresiji."
Ta poziv vabi umetno inteligenco, da sestavi atribucijo iz spomina; Velik del izhoda bo lažen.
Zmogljiv poziv: "Predlagajte ključne besede, sinonime in iskalne nize za iskanje po zbirki podatkov o kognitivni vedenjski terapiji in depresiji. Ne navajajte virov/citatov; našel bom članke iz dejanske zbirke podatkov, nato pa vam dam njihova besedila."
Ta poziv postavi AI v varno vlogo (strateg iskanja); Reference prihajajo iz pravega vira.
Pogoste napake
- Neposredno z uporabo atribucije, ki jo je dal AI. Na videz popolni viri so pogosto izmišljeni; Nikoli se ne uporablja brez potrditve.
- Slepo zaupanje DOI/povezavi. AI lahko ustvari tudi realističen, a neobstoječ DOI; Ne bo veljaven, dokler ga ne odprete in preverite.
- Ignoriranje ravni dokazov. Brez vprašanja, ali se za stavkom "študije pravijo" skriva blog ali metaanaliza.
- Zamenjava povzetka AI za članek. Je zbirni zemljevid; Kritična odločitev le na podlagi povzetka pomeni presojo brez branja besedila.
- Uporaba v enojnem načinu. Vedno uporablja AI v načinu "vir iz pomnilnika"; medtem ko je varen način "povzemi iz danega besedila".
Če povzamem
V literaturi je umetna inteligenca močan pospeševalnik za razjasnitev konceptov, strategijo iskanja in povzemanje (ko posredujete besedilo). A reference, statistike in ugotovitve si izmišlja iz lastnega spomina (halucinacija). Preverite vsak citat in številko iz primarnega vira; Vir, ki ga ne morete najti, upoštevajte kot neveljaven. Označite raven dokazov (od meta-analize do poročila o primeru) za vsako ugotovitev. Uporabite umetno inteligenco v dveh različnih načinih: »sugestivni brez virov« in »povzemalnik z viri«, pri čemer dajte prednost slednjemu.
Aplikacijska naloga
Izberite temo. Najprej prosite AI za 5 citatov na to temo (način izvora). Nato poiščite teh 5 citatov enega za drugim v pravem akademskem iskalniku in zabeležite, koliko jih dejansko obstaja. Nato poiščite 2 prava članka o isti temi, njuna besedila vnesite AI in naj pripravi primerjalno tabelo. Primerjajte dve izkušnji: katera je dala zanesljiv rezultat?
kontrolni seznam
- [ ] Nisem uporabil nobene od referenc, ki jih je dal AI, ne da bi jih potrdil.
- [ ] Članke sem pridobil iz resnične, strokovno pregledane zbirke podatkov.
- [ ] Za povzetek sem AI dal dejansko besedilo članka (ne po spominu).
- [ ] Vsako numerično trditev sem primerjal z izvirnim besedilom.
- [ ] Za vsako ugotovitev sem označil stopnjo dokaza.
- [ ] Razveljavil sem vir, ki ga nisem našel.