Pelnas:
- Gebėjimas naudoti dirbtinį intelektą literatūros kartografavimui, koncepcijų nuskaitymui ir skaitymo prioritetų nustatymui, siekiant valdyti sufabrikuotų šaltinių (haliucinacijų) riziką
- Galimybė sukurti patikrinimo srautą, patvirtinantį kiekvieną citatą, radinį ir poveikio dydžio teiginį iš pirminio šaltinio
- Gebėjimas atskirti įrodymų lygį (metaanalizę, RCT, atvejį) ir palyginti AI santrauką su įrodymų hierarchija
Psichologija yra įrodymais pagrįsta profesija: tyrimų duomenys parodo, ar intervencija veikia, o ne „man taip atrodo“. Kai ekspertas nori neatsilikti, parašyti disertaciją ar pasirinkti tinkamą bylos metodą, jis kreipiasi į literatūrą. Tačiau literatūra didžiulė; Kasmet išleidžiama dešimtys tūkstančių straipsnių. Dirbtinis intelektas (DI) čia yra didžiulis greitintuvas: jis apibrėžia sąvoką, nubrėžia sritį, pasiūlo, kurį straipsnį turėtumėte perskaityti pirmiausia, supaprastina sudėtingą tekstą. Tačiau čia slypi pats pavojingiausias AI bruožas literatūroje: jis kuria neegzistuojančius šaltinius. Šiame skyriuje sužinosite, kaip dirbtinį intelektą paversti akceleratoriumi literatūros versle, kaip dirbti nepatenkant į išgalvotų šaltinių (haliucinacijų) pinkles.
Ką AI veikia literatūroje, ką jis sudaro?
Literatūros užduotys, kuriose dirbtinis intelektas yra stiprus: sąvokos paaiškinimas paprasta kalba; apibendrinti pagrindinius debatus tam tikroje srityje; kad tekstas būtų skaitomas; pasiūlyti raktinius žodžius ir paieškos strategiją; apibendrinti straipsnį (kai pateikiate tekstą); lyginant skirtingus požiūrius. Šiuo atveju AI sumažina skaitymo valandas iki minučių.
AI sudaryti dalykai: citatos (šaltiniai, kurie atrodo tobulai, bet neegzistuoja, įskaitant autorių, metus, žurnalą, DOI numerį); statistika (realiai atrodantys skaičiai, pvz., efekto dydis, imties dydis, p reikšmė); išvados (tyrime teigiama, kad „tai rado“, nors iš tikrųjų to nerado). Taip yra todėl, kad dirbtinis intelektas nėra paieškos variklis, o „tikėtinas žodžių atspėtojas“: jis generuoja greičiausiai atrodantį citatų formatą, netikrindamas jo tikslumo.
Dėmesio: bet kokia AI pateikta citata negalioja, jei jos nepatvirtinate iš pirminio šaltinio (pačio straipsnio). Net iš pažiūros tobulas DOI gali būti netikras. Visada geriau pasakyti „neradau“, nei „įdėjau ne tą šaltinį“.
Įrodymų hierarchija: ne visos išvados yra vienodos
Kai AI apibendrina radinį, jis nepasakoja jo įrodomosios galios. Tačiau egzistuoja įrodymų hierarchija. Vertinant ieškinį, būtina žinoti, kokio tipo įrodymais jis grindžiamas.
Įrodymų lygis
ka tu turi omenyje?
galia
Metaanalizė / sisteminė apžvalga
Statistinis kelių tyrimų derinys
aukščiausias
Atsitiktinių imčių kontroliuojamas tyrimas (RCT)
Eksperimentas, kurio metu dalyviai suskirstomi į atsitiktines grupes
aukštas
Išilginis/skerspjūvio tyrimas
Stebėjimas, neeksperimentinis
vidutinis
Bylų serija / atvejo ataskaita
Vieno ar kelių atvejų aprašymas
žemas
Eksperto nuomonė / teorinis raštas
Daugiau interpretacijų nei įrodymų
žemiausia
Kai dirbtinis intelektas jums sako „tyrimai rodo...“, jūsų pirmasis klausimas turėtų būti toks: kokio tipo tyrimai? Metaanalizės išvados nėra tokios pat svarbos kaip vienos atvejo ataskaitos išvada.
Žingsnis po žingsnio: AI pagrįstas saugus literatūros srautas
- Tegul dirbtinis intelektas paaiškina koncepciją. Norėdami greitai pasiekti reikalą, paprašykite AI pateikti paprastą santrauką ir pagrindines sąvokas. (Tai yra pradžia, o ne šaltinis.)
- Nustatykite paieškos strategiją. Paprašykite AI pasiūlyti raktinius žodžius, sinonimus ir paieškos eilutę; naudoti jį realiose duomenų bazėse (akademinėse paieškos sistemose, žurnalų archyvuose).
- Suraskite tikrus šaltinius patys. Gaukite straipsnius iš recenzuojamų duomenų bazių. Naudokite AI siūlomus pavadinimus kaip paieškos užuominas, o ne kaip citatas.
- Apibendrinkite tekstą į AI. Pateikite tikrojo rasto straipsnio tekstą AI ir paprašykite santraukos / palyginimo. AI nebekuria dalykų, nes turi tikrą tekstą.
- Patvirtinkite kiekvieną skaičių ir radinį. AI palyginkite efekto dydį abstrakčiai su faktine verte tekste.
- Pažymėkite įrodymų lygį. Prie kiekvieno radinio parašykite įrodymų tipą.
Patarimas: AI literatūroje naudokite dviem skirtingais režimais: „be šaltinio įtaigus“ (koncepcijos aprašymas, paieškos idėja) ir „iš šaltinio apibendrinimo“ (kai pateikiate tekstą). Pastarasis yra saugus, nes AI veikia iš jūsų pateikto teksto, o ne iš savo atminties.
trys mini dėklai
1 atvejis – netikro priskyrimo epidemija. Absolventas prašo AI cituoti 15 šaltinių skyrių apie nerimo sutrikimus. AI suteikia viską APA formatu. Patikrinęs mokinys pamato, kad 6 iš 15 šaltinių realiai neegzistuoja (40 proc.), o 3 priskirti netinkamam žurnalui. Taigi pusė sąrašo yra netinkama naudoti. Pamoka: priskyrimas gaunamas iš tikros duomenų bazės, o ne iš AI.
2 atvejis – tinkamas naudojimas. Gydytojas po vieną AI pateikia 4 realių metaanalizių PDF tekstą ir sako „pateikite mėginio numerį, pagrindinio poveikio dydį ir kiekvieno iš jų apribojimus“. AI per 10 minučių sumažina 4 30 puslapių straipsnius į lyginamąją lentelę. Gydytojas kiekvieną numerį patvirtina tekstu; Visi jie pasirodė teisingi, nes AI veikė iš pateikto teksto, o ne iš savo atminties.
3 atvejis. Įrodymų spąstai. Ekspertas klausia AI: „Ar X terapija veikia? – klausia jis. AI sako „taip, tyrimai tai palaiko“ ir skaičiuoja keturis „tyrimus“. Kai ekspertas jį išnagrinėja, jis mato, kad trys iš jų yra vieno atvejo ataskaita, o vienas - dienoraščio įrašas; Nėra net vieno RCT. Nors formaliai teiginys gali atrodyti „įrodytas“, jo įrodomoji galia yra labai silpna.
Kopijuojami raginimai ir šablonai
Aš tik pradedu šią temą. NESUKURIMAS MAN ŠALTINIŲ, tiesiog pateikite man konceptualų įvadą: pagrindines sąvokas, pagrindines šios srities diskusijas ir raktinių žodžių sąrašą + sinonimus, kuriuos galiu naudoti ieškant. Priskyrimas; Jei priskyrimas reikalingas, pasakykite „raskite šaltinį patys“. Tema: [subject]
Žemiau įklijuoju tikro straipsnio tekstą. Dirbkite tik iš šio teksto, nepridėkite pašalinės informacijos. Išskirkite: tyrimo klausimą, metodą, imtį (n), pagrindinį radinį ir poveikio dydį, apribojimus, įrodymų lygį. Tekstas: [straipsnio tekstas]
Žemiau yra 3 straipsnių tekstai. Sudėkite juos į lyginamąją lentelę su šiais stulpeliais: autoriaus metai, pavyzdys, metodas, pagrindinė išvada, įrodymų lygis, apribojimas. Dirbkite tik iš pateiktų tekstų, nepridėkite šaltinių. Tekstai: [tekstai]
Išvardykite kiekvieną šio teksto skaitinį teiginį (n, p, efekto dydis, procentas) atskiroje eilutėje, kad galėčiau tai patvirtinti originaliu straipsniu. Nepridėkite skaičių, kurių negalite patvirtinti patys.Tekstas: [santrauka]
Silpnas raginimas / Stiprus raginimas
Silpnas raginimas: „Pateikite 10 akademinių šaltinių apie kognityvinės elgesio terapijos veiksmingumą sergant depresija“.
Šis raginimas ragina AI sudaryti priskyrimą iš atminties; Didelė dalis produkcijos bus netikra.
Galingas raginimas: "Pasiūlykite raktinius žodžius, sinonimus ir paieškos eilutes, kad galėtumėte ieškoti kognityvinės elgesio terapijos ir depresijos duomenų bazėje. Nenurodykite šaltinių / citatų; aš surasiu straipsnius iš tikrosios duomenų bazės, tada pateiksiu jų tekstus."
Šis raginimas AI suteikia saugaus vaidmens (paieškos stratego); Nuorodos yra iš tikro šaltinio.
Dažnos klaidos
- Tiesiogiai naudojant AI pateiktą priskyrimą. Iš pažiūros tobuli šaltiniai dažnai yra išgalvoti; Jis niekada nenaudojamas be patvirtinimo.
- Aklai pasitikėdamas DOI/nuoroda. AI taip pat gali sukurti tikrovišką, bet neegzistuojančią DOI; Jis nebus laikomas galiojančiu, kol jo neatidarysite ir patikrinsite.
- Įrodymų lygio ignoravimas. Neklausti, ar už sakinio „studijos sako“, slypi tinklaraštis ar metaanalizė.
- Straipsnio AI santraukos pakeitimas. Tai suvestinis žemėlapis; Pagrįsti kritišką sprendimą tik santrauka reiškia priimti sprendimą neskaitant teksto.
- Naudojimas vienu režimu. Visada naudoti AI režimu „išteklius iš atminties“; tuo tarpu saugus yra režimas „sutraukti iš pateikto teksto“.
Apibendrinant
Literatūros versle AI yra galingas sąvokos paaiškinimo, paieškos strategijos ir apibendrinimo (kai pateikiate tekstą) greitintuvas. Tačiau jis kuria nuorodas, statistiką ir išvadas iš savo atminties (haliucinacijos). Patikrinkite kiekvieną citatą ir numerį iš pirminio šaltinio; Apsvarstykite šaltinį, kurio negalite rasti netinkamo. Pažymėkite kiekvienos išvados įrodymų lygį (nuo metaanalizės iki bylos ataskaitos). Naudokite dirbtinį intelektą dviem skirtingais režimais: „ne šaltinio įtaigus“ ir „šaltinio apibendrinimo priemonė“, pirmenybę teikiant pastarajam.
Taikymo užduotis
Pasirinkite temą. Pirmiausia paprašykite AI pateikti 5 citatas ta tema (šaltinio režimas). Tada ieškokite šių 5 citatų po vieną tikroje akademinėje paieškos sistemoje ir pažymėkite, kiek jų iš tikrųjų yra. Tada suraskite 2 tikrus straipsnius ta pačia tema, pateikite jų tekstus dirbtiniam intelektui ir paprašykite jo sudaryti lyginamąją lentelę. Palyginkite dvi patirtis: kuri iš jų davė patikimą rezultatą?
kontrolinis sąrašas
- [ ] Nenaudojau jokių AI pateiktų nuorodų jų nepatvirtinęs.
- [ ] Straipsnius gavau iš tikros, recenzuojamos duomenų bazės.
- [ ] Santraukai pateikiau AI tikrąjį straipsnio tekstą (ne iš atminties).
- [ ] Kiekvieną skaitinį teiginį palyginau su originaliu tekstu.
- [ ] Kiekvienam radiniui pažymėjau įrodymų lygį.
- [ ] Aš panaikinau šaltinį, kurio negalėjau rasti.