Njësia 3 / 12

Rishikimi i literaturës dhe qasja në informacione të bazuara në prova

Fitimet:

  • Aftësia për të përdorur inteligjencën artificiale në hartimin e literaturës, skanimin e koncepteve dhe prioritizimin e leximit për të menaxhuar rrezikun e burimeve të fabrikuara (halucinacione)
  • Aftësia për të krijuar një rrjedhë verifikimi që konfirmon çdo pretendim të citimit, gjetjes dhe efektit të madhësisë nga burimi parësor
  • Aftësia për të dalluar nivelin e provave (meta-analizë, RCT, rast) dhe për të peshuar përmbledhjen e AI kundrejt hierarkisë së provave

Psikologjia është një profesion i bazuar në prova: provat kërkimore na tregojnë nëse një ndërhyrje funksionon, jo "thjesht më duket ashtu". Kur një ekspert dëshiron të qëndrojë aktual, të shkruajë një tezë ose të zgjedhë qasjen e duhur për një rast, ai i drejtohet letërsisë. Por letërsia është e madhe; Dhjetëra mijëra artikuj publikohen çdo vit. Inteligjenca artificiale (AI) është një përshpejtues i jashtëzakonshëm këtu: përcakton një koncept, harton fushën, sugjeron se cilin artikull duhet të lexoni së pari, thjeshton një tekst kompleks. Por këtu qëndron tipari më i rrezikshëm i AI në literaturë: ajo fabrikon burime joekzistente. Në këtë njësi, do të mësoni se si ta bëni AI një përshpejtues në biznesin e letërsisë, si të punoni pa rënë në grackën e burimeve të fabrikuara (halucinacione).

Çfarë bën AI në literaturë, çfarë përbën?

Detyrat e letërsisë ku AI është e fortë: shpjegimi i një koncepti në gjuhë të thjeshtë; përmbledh debatet kryesore në një fushë; për të bërë një tekst të lexueshëm; sugjeroni fjalë kyçe dhe strategji kërkimi; përmblidhni një artikull (kur jepni tekstin); duke krahasuar pikëpamje të ndryshme. Në këto, AI redukton orët e leximit në minuta.

Gjërat që krijon AI: citimet (burimet që duken perfekte, por që nuk ekzistojnë, duke përfshirë autorin, vitin, ditarin, numrin DOI); statistika (numra me pamje reale si madhësia e efektit, madhësia e kampionit, vlera p); gjetjet (një studim pretendon se e ka "gjetur atë" kur në fakt nuk e ka). Kjo është për shkak se AI nuk është një motor kërkimi, por një "gjuhësues i mundshëm i fjalëve": ai gjeneron formatin më të mundshëm të citimit, pa kontrolluar saktësinë e tij.

Kujdes: Çdo citim i dhënë nga AI nuk është i vlefshëm pa e verifikuar atë nga burimi parësor (vetë artikulli). Edhe një DOI në dukje e përsosur mund të jetë e rreme. Është gjithmonë më mirë të thuash "Nuk e gjeta" sesa "Vendova burimin e gabuar".

Hierarkia e provave: jo të gjitha gjetjet janë të barabarta

Kur AI përmbledh një gjetje, ajo nuk ju tregon fuqinë e saj provuese. Megjithatë, ekziston një hierarki provash. Kur peshoni një pretendim, është thelbësore të dini se në çfarë lloj provash bazohet.

Niveli i provave

Çfarë do të thotë?

fuqinë

Meta-analizë / rishikim sistematik

Kombinimi statistikor i studimeve të shumta

më i lartë

Prova e kontrolluar e rastësishme (RCT)

Eksperiment në të cilin pjesëmarrësit ndahen në grupe të rastësishme

lartë

Studim gjatësor/ndërsektorial

Vëzhguese, joeksperimentale

e mesme

Seria e rastit / raporti i rastit

Përshkrimi i një ose disa rasteve

të ulëta

Mendimi i ekspertit / shkrimi teorik

Më shumë interpretim sesa dëshmi

më e ulëta

Kur AI ju thotë "kërkimet tregojnë ..." pyetja juaj e parë duhet të jetë: Cili lloj hulumtimi? Gjetja e një meta-analize nuk ka të njëjtën peshë si gjetja e një raporti të vetëm rasti.

Hap pas hapi: Rrjedha e sigurt e literaturës e mbështetur nga AI

  1. Lëreni AI të shpjegojë konceptin. Për të arritur shpejt te pika, kërkoni nga AI një përmbledhje të thjeshtë dhe koncepte kryesore. (Ky është një fillestar, jo një burim.)
  2. Vendosni strategjinë e kërkimit. Kërkojini AI të sugjerojë fjalë kyçe, sinonime dhe varg kërkimi; përdorni atë në bazat e të dhënave reale (makinat e kërkimit akademik, arkivat e revistave).
  3. Gjeni vetë burimet reale. Merrni artikuj nga bazat e të dhënave të rishikuara nga kolegët. Përdorni titujt e sugjeruar nga AI si të dhëna kërkimi, jo si citate.
  4. Përmblidhni tekstin në AI. Jepni tekstin e artikullit aktual që gjetët në AI dhe kërkoni një përmbledhje/krahasim. AI nuk krijon më gjëra, sepse ka tekst real.
  5. Konfirmoni çdo numër dhe gjetje. AI krahason një madhësi efekti në abstrakt me vlerën aktuale në tekst.
  6. Etiketoni nivelin e provave. Shkruani llojin e provave pranë çdo gjetjeje.
Këshillë: Përdorni AI në literaturë në dy mënyra të ndryshme: "sugjerues pa burim" (ekspozim koncepti, ide kërkimi) dhe "përmbledhës me burim" (kur jepni tekstin). Ky i fundit është i sigurt sepse AI funksionon nga teksti që ju jepni, jo nga kujtesa e tij.

tre mini kuti

Rasti 1 - Epidemia e atributeve të rreme. Një student i diplomuar kërkon një citim të AI për një kapitull me 15 burime mbi çrregullimet e ankthit. AI i jep të gjitha në formatin APA. Kur studenti kontrollon, ai sheh se 6 nga 15 burime nuk ekzistojnë në të vërtetë (40%) dhe 3 janë caktuar në ditarin e gabuar. Pra gjysma e listës është e papërdorshme. Mësimi: atribuimi vjen nga baza e vërtetë e të dhënave, jo nga AI.

Rasti 2 - Përdorimi i duhur. Një klinik i jep tekstin PDF të 4 meta-analizave reale tek AI një nga një dhe thotë "tabelë numrin e mostrës, madhësinë e efektit kryesor dhe kufizimin e secilit." AI redukton 4 artikuj me 30 faqe në një tabelë krahasuese në 10 minuta. Mjeku klinik konfirmon çdo numër me tekst; Të gjitha rezultojnë të sakta sepse AI ka punuar nga teksti i dhënë, jo nga kujtesa e tij.

Rasti 3 — Niveli i kurthit të provave. Një ekspert pyet AI: "A funksionon terapia X?" pyet ai. AI thotë "po, studimet e mbështesin atë" dhe numëron katër "studime". Kur eksperti e shqyrton, sheh se tre prej tyre janë një raport i vetëm rasti dhe një është një postim në blog; Nuk ka as edhe një RCT të vetme. Megjithëse pretendimi mund të duket zyrtarisht i "provuar", fuqia e tij provuese është shumë e dobët.

Kërkesat dhe shabllonet e kopjueshme

Unë sapo kam filluar me këtë temë. PA KRIJUAR ME BURIME, thjesht më jepni një hyrje konceptuale: konceptet bazë, diskutimet kryesore të fushës dhe një listë me fjalë kyçe + sinonime që mund të përdor kur kërkoj. Atribuimi; Nëse kërkohet atribuimi, thoni "gjene vetë burimin". Tema: [subjekti]

Po ngjis tekstin e një artikulli aktual më poshtë. Punoni vetëm nga ky tekst, mos shtoni informacione të jashtme. Nxjerr sa më poshtë: pyetjen e kërkimit, metodën, kampionin (n), gjetjen kryesore dhe madhësinë e efektit, kufizimet, nivelin e provave. Teksti: [teksti i artikullit]

Më poshtë është teksti i 3 artikujve. Vendosini ato në një tabelë krahasuese me kolonat e mëposhtme: viti i autorit, mostra, metoda, gjetja kryesore, niveli i provave, kufizimi. Punoni vetëm nga tekstet e dhëna, mos shtoni burime. Tekstet: [tekste]

Rendisni çdo pretendim numerik (n, p, madhësia e efektit, përqindja) në këtë tekst në një rresht të veçantë, në mënyrë që ta konfirmoj me artikullin origjinal. Mos shtoni asnjë numër që nuk mund t'i verifikoni vetë. Teksti: [përmbledhje]

Prompt i dobët / Prompt i fortë

Prompt i dobët: "Jepni 10 burime akademike për efektivitetin e terapisë konjitive të sjelljes në depresion."

Kjo kërkesë fton AI të krijojë atribuimin nga kujtesa; Një pjesë e konsiderueshme e prodhimit do të jetë e rreme.

Prompt i fuqishëm: "Sugjeroni fjalë kyçe, sinonime dhe vargje kërkimi për të kërkuar bazën e të dhënave mbi terapinë konjitive të sjelljes dhe depresionin. Mos jepni burime/citime; do t'i gjej artikujt nga baza e të dhënave aktuale, pastaj do t'ju jap tekstet e tyre."

Ky prompt e vendos AI në rolin e sigurt (strateg kërkimi); Referencat vijnë nga burimi i vërtetë.

Gabimet e zakonshme

  • Duke përdorur drejtpërdrejt atributin e dhënë nga UA. Burimet në dukje të përsosura shpesh fabrikohen; Nuk përdoret kurrë pa konfirmim.
  • Duke i besuar verbërisht DOI/lidhjen. AI gjithashtu mund të prodhojë DOI realiste, por jo-ekzistente; Nuk do të konsiderohet e vlefshme derisa ta hapni dhe kontrolloni.
  • Injorimi i nivelit të provave. Duke mos pyetur nëse ka një blog apo një meta-analizë pas fjalisë "thonë studimet".
  • Zëvendësimi i përmbledhjes së AI për artikullin. Është një hartë përmbledhëse; Të bazosh një vendim kritik vetëm në përmbledhje do të thotë të bësh një gjykim pa lexuar tekstin.
  • Përdorimi në modalitetin e vetëm. Gjithmonë duke përdorur AI në modalitetin "burim nga kujtesa"; kurse e sigurta është mënyra “përmbledh nga teksti i dhënë”.

Në përmbledhje

Në biznesin e letërsisë, AI është një përshpejtues i fuqishëm për sqarimin e konceptit, strategjinë e kërkimit dhe përmbledhjen (kur jepni tekstin). Por ai sajon referenca, statistika dhe gjetje nga kujtesa e tij (halucinacione). Verifikoni çdo citim dhe numër nga burimi kryesor; Merrni parasysh burimin që nuk mund ta gjeni të pavlefshëm. Etiketoni nivelin e provave (nga meta-analiza në raportin e rastit) për çdo gjetje. Përdorni AI në dy mënyra të ndryshme: "sugjerues pa burim" dhe "përmbledhës me burim", me një preferencë për këtë të fundit.

Detyra e aplikimit

Zgjidhni një temë. Së pari pyesni AI për 5 citate për atë temë (modaliteti me burim). Pastaj kërkoni këto 5 citate një nga një në një motor kërkimi të vërtetë akademik dhe vini re se sa ekzistojnë në të vërtetë. Më pas gjeni 2 artikuj të vërtetë për të njëjtën temë, ushqeni tekstet e tyre në AI dhe lërini të prodhojë një tabelë krahasuese. Krahasoni dy përvoja: cila prej tyre dha rezultate të besueshme?

listë kontrolli

  • [ ] Nuk kam përdorur asnjë nga referencat e dhëna nga AI pa i konfirmuar ato.
  • [ ] I kam marrë artikujt nga një bazë të dhënash e vërtetë, e rishikuar nga kolegët.
  • [ ] Për përmbledhjen, i dhashë AI tekstin aktual të artikullit (jo nga kujtesa).
  • [ ] Kam krahasuar çdo pretendim numerik me tekstin origjinal.
  • [ ] Unë etiketova nivelin e provave për çdo gjetje.
  • [ ] E zhvlerësova burimin që nuk e gjeta.