Unità 3 / 12

Reviżjoni tal-Letteratura u Aċċess għal Informazzjoni Ibbażata fuq l-Evidenza

Qligħ:

  • Kapaċità li tuża l-intelliġenza artifiċjali fl-immappjar tal-letteratura, l-iskannjar tal-kunċett u l-prijoritizzazzjoni tal-qari biex timmaniġġja r-riskju ta 'sorsi fabbrikati (alluċinazzjonijiet)
  • Kapaċità li tistabbilixxi fluss ta 'verifika li tikkonferma kull ċitazzjoni, sejba u talba tad-daqs tal-effett mis-sors primarju
  • Kapaċità li tiddistingwi l-livell ta’ evidenza (meta-analiżi, RCT, każ) u tiżen is-sommarju tal-AI kontra l-ġerarkija tal-evidenza

Il-psikoloġija hija professjoni bbażata fuq l-evidenza: l-evidenza tar-riċerka tgħidilna jekk intervent jaħdimx, mhux "jidhirli biss." Meta espert ikun irid jibqaʼ kurrenti, jikteb teżi, jew jagħżel l-approċċ it-tajjeb għal każ, idur għal-letteratura. Imma l-letteratura hija enormi; Għexieren ta’ eluf ta’ artikli jiġu ppubblikati kull sena. L-intelliġenza artifiċjali (AI) hija aċċeleratur tremend hawn: tiddefinixxi kunċett, timmappa l-qasam, tissuġġerixxi liema artikolu għandek taqra l-ewwel, tissimplifika test kumpless. Iżda hawnhekk tinsab l-aktar karatteristika perikoluża tal-AI fil-letteratura: tiffabbrika sorsi ineżistenti. F'din l-unità, int se titgħallem kif tagħmel l-AI aċċeleratur fin-negozju tal-letteratura, kif taħdem mingħajr ma taqa 'fin-nassa ta' sorsi fabbrikati (alluċinazzjonijiet).

X'tagħmel l-AI fil-letteratura, x'tagħmel?

Ħidmiet tal-letteratura fejn l-AI hija b'saħħitha: tispjega kunċett b'lingwaġġ sempliċi; jiġbor fil-qosor dibattiti ewlenin f'qasam; biex tagħmel test leġibbli; jissuġġerixxu kliem ewlieni u strateġija ta' tfittxija; agħti fil-qosor artiklu (meta tipprovdi t-test); tqabbel fehmiet differenti. F'dawn, l-AI tnaqqas is-sigħat tal-qari għal minuti.

Affarijiet li tagħmel l-AI: ċitazzjonijiet (sorsi li jidhru perfetti iżda li ma jeżistux, inklużi l-awtur, is-sena, il-ġurnal, in-numru DOI); statistika (numri li jidhru reali bħad-daqs tal-effett, id-daqs tal-kampjun, il-valur p); sejbiet (studju jsostni li "sabu li" meta fil-fatt le). Dan minħabba li l-AI mhix magna tat-tiftix, iżda "guesser kelma probabbli": tiġġenera l-format ta 'ċitazzjoni li jidher l-aktar probabbli, mingħajr ma jiċċekkja l-eżattezza tiegħu.

Attenzjoni: Kwalunkwe ċitazzjoni mogħtija mill-AI mhix valida mingħajr ma inti tivverifikaha mis-sors primarju (l-artiklu nnifsu). Anke DOI li jidher perfett jista 'jkun falz. Dejjem aħjar li tgħid "Ma stajtx insibha" milli "Inpoġġi s-sors ħażin."

Ġerarkija tal-evidenza: mhux is-sejbiet kollha huma ugwali

Meta l-AI tiġbor fil-qosor sejba, ma tgħidlekx is-saħħa evidenzjarja tagħha. Madankollu, hemm ġerarkija ta 'evidenza. Meta tiżen talba, huwa essenzjali li tkun taf fuq liema tip ta 'evidenza hija bbażata.

Livell ta' evidenza

Xi tfisser?

qawwa

Meta-analiżi / reviżjoni sistematika

Kombinazzjoni statistika ta' studji multipli

l-ogħla

Prova kkontrollata randomised (RCT)

Esperiment li fih il-parteċipanti jinqasmu fi gruppi każwali

għolja

Studju lonġitudinali/transversali

Osservazzjonali, mhux sperimentali

medju

Serje ta' każijiet / rapport ta' każ

Deskrizzjoni ta' każ wieħed jew diversi

baxx

Opinjoni esperta / kitba teoretika

Aktar interpretazzjoni milli evidenza

l-aktar baxx

Meta l-AI tgħidlek "ir-riċerka turi..." l-ewwel mistoqsija tiegħek għandha tkun: Liema tip ta 'riċerka? Is-sejba ta' meta-analiżi m'għandhiex l-istess piż bħas-sejba ta' rapport ta' każ wieħed.

Pass pass: Fluss ta' letteratura sigur imħaddem bl-AI

  1. Ħalli l-AI jispjega l-kunċett. Biex tasal malajr il-punt, staqsi lill-AI għal sommarju sempliċi u kunċetti ewlenin. (Dan huwa starter, mhux sors.)
  2. Stabbilixxi strateġija ta 'tfittxija. Staqsi lill-AI biex tissuġġerixxi kliem ewlieni, sinonimi, u sekwenza ta' tfittxija; użah fuq databases reali (magni tat-tiftix akkademiċi, arkivji tal-ġurnali).
  3. Sib sorsi reali lilek innifsek. Ikseb artikli minn databases riveduti mill-pari. Uża titoli ssuġġeriti mill-AI bħala ħjiel ta' tfittxija, mhux bħala ċitazzjonijiet.
  4. Agħti fil-qosor it-test għall-AI. Agħti t-test tal-artiklu attwali li sibt lill-AI u staqsi għal sommarju/tqabbil. L-AI m'għadhiex tagħmel l-affarijiet, għax għandha test reali.
  5. Ikkonferma kull numru u sejba. AI tqabbel daqs tal-effett fl-astratt mal-valur attwali fit-test.
  6. Ittikketta l-livell ta 'evidenza. Ikteb it-tip ta’ evidenza ħdejn kull sejba.
Tip: Uża l-AI fil-letteratura f'żewġ modi differenti: "suġġestiv bla sors" (espożizzjoni tal-kunċett, idea ta 'tfittxija) u "sinteżitur mis-sors" (meta tagħti t-test). Dan tal-aħħar huwa sigur minħabba li l-AI taħdem mit-test li tipprovdi, mhux mill-memorja tagħha stess.

tliet każijiet żgħar

Każ 1 — L-epidemija tal-attribuzzjoni falza. Student gradwat jitlob ċitazzjoni AI għal kapitolu ta '15-il sors dwar disturbi ta' ansjetà. AI tagħti dan kollu fil-format APA. Meta l-istudent jiċċekkja, jara li 6 minn 15-il sors fil-fatt ma jeżistux (40%) u 3 huma assenjati għall-ġurnal ħażin. Allura nofs il-lista ma tistax tintuża. Lezzjoni: l-attribuzzjoni ġejja mid-database reali, mhux mill-AI.

Każ 2 — Użu korrett. Klinika jagħti t-test PDF ta '4 meta-analiżi reali lill-AI waħda waħda u jgħid "tabella n-numru tal-kampjun, id-daqs tal-effett prinċipali u l-limitazzjoni ta' kull wieħed." L-AI tnaqqas 4 artikoli ta' 30 paġna f'tabella komparattiva f'10 minuti. It-tabib jikkonferma kull numru bit-test; Kollha kemm huma jirriżultaw li huma korretti minħabba li l-AI ħadmet mit-test mogħti, mhux mill-memorja tagħha stess.

Każ 3 — Livell ta' nassa ta' evidenza. Espert jistaqsi lill-AI, "It-terapija X taħdem?" jistaqsi. L-AI tgħid "iva, l-istudji jappoġġawha" u tgħodd erba '"studji." Meta l-espert jeżaminaha, jara li tlieta minnhom huma rapport ta’ każ wieħed u wieħed huwa blog post; Lanqas ma hemm RCT wieħed. Għalkemm it-talba tista' tidher formalment "ppruvata", is-setgħa evidenzjali tagħha hija dgħajfa ħafna.

Promps u mudelli kopjabbli

Għadni bdejt fuq dan is-suġġett. MINGĦAJR MA ĦLOQLI SORSI, agħtini biss introduzzjoni kunċettwali: kunċetti bażiċi, diskussjonijiet ewlenin tal-qasam, u lista ta’ kliem prinċipali + sinonimi li nista’ nuża meta nfittex. Attribuzzjoni; Jekk l-attribuzzjoni hija meħtieġa, għid "sib is-sors lilek innifsek." Suġġett: [suġġett]

Qed inwaħħal it-test ta' artiklu attwali hawn taħt. Aħdem biss minn dan it-test, iżżidx informazzjoni minn barra. Oħroġ dan li ġej: mistoqsija ta’ riċerka, metodu, kampjun (n), sejba prinċipali u daqs tal-effett, limitazzjonijiet, livell ta’ evidenza. Test: [test tal-artiklu]

Hawn taħt hemm it-test ta '3 artikoli. Poġġihom f'tabella komparattiva bil-kolonni li ġejjin: awtur-sena, kampjun, metodu, sejba prinċipali, livell ta 'evidenza, limitazzjoni. Aħdem biss mit-testi mogħtija, iżżidx sorsi. Testi: [testi]

Elenka kull talba numerika (n, p, daqs tal-effett, persentaġġ) f’dan it-test fuq linja separata sabiex inkun nista’ nikkonfermaha bl-artiklu oriġinali. Żidx numri li ma tistax tivverifika lilek innifsek.Test: [sommarju]

Pront dgħajjef / Pront qawwi

Pront dgħajjef: "Agħti 10 sorsi akkademiċi dwar l-effettività tat-terapija komportamentali konjittiva fid-dipressjoni."

Dan il-pront jistieden lill-AI biex tpatti l-attribuzzjoni mill-memorja; Porzjon sinifikanti tal-output se jkun spurju.

Prompt qawwi: "Issuġġerixxi kliem prinċipali, sinonimi, u kordi ta 'tfittxija biex tfittex id-database dwar terapija konjittiva tal-imġieba u dipressjoni. Tipprovdix sorsi/ċitazzjonijiet; Jien se nsib l-artikoli mid-database attwali, imbagħad nagħtik it-testi tagħhom."

Dan il-pront ipoġġi lill-AI fir-rwol sikur (istrateġist tat-tiftix); Ir-referenzi ġejjin mis-sors reali.

Żbalji komuni

  • Direttament bl-użu tal-attribuzzjoni mogħtija mill-AI. Sorsi apparentement perfetti huma spiss iffabbrikati; Qatt ma jintuża mingħajr konferma.
  • Tafda bl-addoċċ id-DOI/link. L-AI tista' wkoll tipproduċi DOI realistiku iżda ineżistenti; Mhux se jitqies validu sakemm tiftaħha u tiċċekkja.
  • Injora l-livell ta' evidenza. Mhux tistaqsi jekk hemmx blog jew meta-analiżi wara s-sentenza "studies say".
  • Is-sostituzzjoni tas-sommarju tal-AI għall-artikolu. Hija mappa fil-qosor; Li tibbaża deċiżjoni kritika biss fuq is-sommarju tfisser li tagħmel ġudizzju mingħajr ma taqra t-test.
  • L-użu fil-modalità waħda. Dejjem tuża AI fil-modalità "riżorsa mill-memorja"; billi l-waħda sigura hija l-modalità "qosor mit-test mogħti".

Fil-qosor

Fin-negozju tal-letteratura, l-AI hija aċċeleratur qawwi għall-kjarifika tal-kunċett, l-istrateġija tat-tiftix, u s-sommarju (meta tipprovdi t-test). Iżda huwa jiffabbrika referenzi, statistika u sejbiet mill-memorja tiegħu stess (alluċinazzjoni). Ivverifika kull ċitazzjoni u numru mis-sors primarju; Ikkunsidra s-sors li ma tistax issib invalidu. Ittikketta l-livell ta’ evidenza (mill-meta-analiżi sa rapport tal-każ) għal kull sejba. Uża l-AI f'żewġ modi distinti: "suġġestiv mingħajr sorsi" u "sinteżitur minn sorsi," bi preferenza għal dan tal-aħħar.

Kompitu ta' applikazzjoni

Agħżel suġġett. L-ewwel staqsi lill-AI għal 5 ċitazzjonijiet dwar dak is-suġġett (modalità ta’ sors). Imbagħad fittex dawn il-5 ċitazzjonijiet waħda waħda f'magna ta' riċerka akkademika reali u nnota kemm jeżistu fil-fatt. Imbagħad sib 2 artikoli reali dwar l-istess suġġett, agħti t-testi tagħhom lill-AI, u agħmel li tipproduċi tabella komparattiva. Qabbel żewġ esperjenzi: liema waħda tat output affidabbli?

lista ta' kontroll

  • [ ] Ma użajt l-ebda mir-referenzi mogħtija mill-AI mingħajr ma kkonfermajhom.
  • [ ] Ksibt l-artikoli minn database reali, riveduta mill-pari.
  • [ ] Għas-sommarju, tajt lill-AI it-test attwali tal-artikolu (mhux mill-memorja).
  • [ ] Qabbilt kull talba numerika mat-test oriġinali.
  • [ ] Ittikkettjt il-livell ta' evidenza għal kull sejba.
  • [ ] Invalidajt is-sors li ma stajtx insib.