Uhakiki wa Fasihi na Upatikanaji wa Taarifa zenye Ushahidi

Faida:

• Uwezo wa kutumia akili bandia katika uchoraji wa ramani ya fasihi, skanning ya dhana na kipaumbele cha kusoma ili kudhibiti hatari ya vyanzo vilivyobuniwa (hallucinations)
• Uwezo wa kuanzisha mtiririko wa uthibitishaji ambao unathibitisha kila dondoo, upataji na dai la ukubwa wa athari kutoka kwa chanzo msingi
• Uwezo wa kutofautisha kiwango cha ushahidi (uchambuzi wa meta, RCT, kesi) na kupima muhtasari wa AI dhidi ya uongozi wa ushahidi.

Saikolojia ni taaluma inayotegemea ushahidi: ushahidi wa utafiti hutuambia ikiwa uingiliaji kati unafanya kazi, sio "inaonekana kwangu tu." Wakati mtaalam anataka kukaa sasa, kuandika thesis, au kuchagua mbinu sahihi kwa kesi, anarudi kwenye fasihi. Lakini fasihi ni kubwa; Makumi ya maelfu ya nakala huchapishwa kila mwaka. Akili Bandia (AI) ni kichapuzi kikubwa sana hapa: inafafanua dhana, ramani ya uwanja, inapendekeza ni makala gani unapaswa kusoma kwanza, hurahisisha maandishi changamano. Lakini hapa kuna kipengele cha hatari zaidi cha AI katika maandiko: hutengeneza vyanzo visivyopo. Katika kitengo hiki, utajifunza jinsi ya kufanya AI kuwa kichapuzi katika biashara ya fasihi, jinsi ya kufanya kazi bila kuingia kwenye mtego wa vyanzo vilivyotengenezwa (hallucinations).

AI hufanya nini katika fasihi, inafanya nini?

Kazi za fasihi ambapo AI ina nguvu: kuelezea dhana katika lugha nyepesi; kufupisha mijadala mikuu katika uwanja; kufanya maandishi kusomeka; pendekeza maneno muhimu na mkakati wa utafutaji; fanya muhtasari wa kifungu (unapotoa maandishi); kulinganisha maoni tofauti. Katika hizi, AI inapunguza masaa ya kusoma hadi dakika.

Mambo ambayo AI inaunda: manukuu (vyanzo vinavyoonekana vyema lakini havipo, ikiwa ni pamoja na mwandishi, mwaka, jarida, nambari ya DOI); takwimu (nambari zinazoonekana kama vile ukubwa wa athari, saizi ya sampuli, thamani ya p); matokeo (utafiti unadai kuwa "umepata hiyo" wakati ukweli haujapata). Hii ni kwa sababu AI si injini ya utafutaji, lakini "uwezekano wa kubahatisha neno": hutoa umbizo la manukuu linalowezekana zaidi, bila kuangalia usahihi wake.

Angalizo: Nukuu yoyote iliyotolewa na AI si halali bila wewe kuithibitisha kutoka kwa chanzo msingi (makala yenyewe). Hata DOI inayoonekana kuwa kamili inaweza kuwa bandia. Daima ni bora kusema "Sikuweza kuipata" kuliko "Nimeweka chanzo kibaya."

Hierarkia ya ushahidi: sio matokeo yote ni sawa

Wakati AI inafanya muhtasari wa matokeo, haikuambii nguvu yake ya uthibitisho. Walakini, kuna safu ya ushahidi. Wakati wa kupima madai, ni muhimu kujua ni aina gani ya ushahidi ambayo inategemea.

Kiwango cha ushahidi

Unamaanisha nini?

nguvu

Uchambuzi wa meta / ukaguzi wa kimfumo

Mchanganyiko wa takwimu wa tafiti nyingi

ya juu zaidi

Jaribio lililodhibitiwa bila mpangilio (RCT)

Jaribio ambalo washiriki wamegawanywa katika vikundi vya nasibu

juu

Utafiti wa longitudinal/sehemu mtambuka

Uchunguzi, usio wa majaribio

kati

Mfululizo wa kesi / ripoti ya kesi

Maelezo ya kesi moja au kadhaa

chini

Maoni ya kitaalam / uandishi wa kinadharia

Tafsiri zaidi kuliko ushahidi

chini kabisa

Wakati AI inakuambia "utafiti unaonyesha..." swali lako la kwanza linapaswa kuwa: Ni aina gani ya utafiti? Ugunduzi wa uchanganuzi wa meta hauna uzito sawa na ugunduzi wa ripoti ya kesi moja.

Hatua kwa hatua: Mtiririko salama wa fasihi unaoendeshwa na AI

1. Acha AI ieleze dhana. Ili kufikia hatua haraka, waulize AI kwa muhtasari rahisi na dhana muhimu. (Hii ni mwanzilishi, sio chanzo.)
2. Weka mkakati wa utafutaji. Uliza AI kupendekeza maneno muhimu, visawe, na kamba ya utafutaji; itumie kwenye hifadhidata halisi (injini za utaftaji za kielimu, kumbukumbu za majarida).
3. Tafuta vyanzo halisi mwenyewe. Pata makala kutoka kwa hifadhidata zilizokaguliwa na marafiki. Tumia mada zinazopendekezwa na AI kama vidokezo vya utafutaji, si kama manukuu.
4. Fupisha maandishi kwa AI. Toa maandishi ya nakala halisi uliyopata kwa AI na uulize muhtasari / ulinganisho. AI haifanyi tena vitu, kwa sababu ina maandishi halisi.
5. Thibitisha kila nambari na utafutaji. AI inalinganisha saizi ya athari katika muhtasari na thamani halisi katika maandishi.
6. Andika kiwango cha ushahidi. Andika aina ya ushahidi karibu na kila matokeo.

Kidokezo: Tumia AI katika fasihi katika hali mbili tofauti: "pendekezo lisilo na chanzo" (ufafanuzi wa dhana, wazo la utafutaji) na "muhtasari wa chanzo" (unapotoa maandishi). Mwisho ni salama kwa sababu AI hufanya kazi kutoka kwa maandishi unayotoa, sio kutoka kwa kumbukumbu yake mwenyewe.

kesi tatu ndogo

Kesi ya 1 - Janga la sifa ghushi. Mwanafunzi aliyehitimu anaomba nukuu ya AI kwa sura ya vyanzo 15 juu ya shida za wasiwasi. AI inatoa yote katika umbizo la APA. Mwanafunzi anapokagua, anaona kuwa vyanzo 6 kati ya 15 havipo (40%) na 3 vimepewa jarida lisilo sahihi. Kwa hivyo nusu ya orodha haiwezi kutumika. Somo: sifa hutoka kwa hifadhidata halisi, sio AI.

Kesi 2 - Matumizi sahihi. Daktari anatoa maandishi ya PDF ya uchanganuzi 4 za meta kwa AI moja baada ya nyingine na kusema "jedwali nambari ya sampuli, saizi kuu ya athari na kizuizi cha kila moja." AI inapunguza vifungu 4 vya kurasa 30 kuwa jedwali linganishi katika dakika 10. Daktari anathibitisha kila nambari kwa maandishi; Zote zinageuka kuwa sahihi kwa sababu AI ilifanya kazi kutoka kwa maandishi yaliyopewa, sio kutoka kwa kumbukumbu yake mwenyewe.

Kesi ya 3 - Kiwango cha mtego wa ushahidi. Mtaalam anauliza AI, "Je, tiba X inafanya kazi?" anauliza. AI inasema "ndio, tafiti zinaunga mkono" na huhesabu "masomo" manne. Mtaalamu anapoichunguza anaona tatu kati ya hizo ni ripoti ya kesi moja na moja ni chapisho la blogu; Hakuna hata RCT moja. Ingawa dai hilo linaweza kuonekana kuwa "limethibitishwa", nguvu yake ya uthibitisho ni dhaifu sana.

Vidokezo na violezo vinavyoweza kunakiliwa

Ninaanza tu juu ya mada hii. BILA KUNUNIUNIA VYANZO, nipe tu utangulizi wa dhana: dhana za kimsingi, mijadala mikuu ya uga, na orodha ya maneno muhimu + visawe ninavyoweza kutumia ninapotafuta. Maelezo; Ikiwa maelezo yanahitajika, sema "tafuta chanzo mwenyewe." Mada: [somo]

Ninabandika maandishi ya nakala halisi hapa chini. Fanya kazi tu kutoka kwa maandishi haya, usiongeze habari za nje. Dondoo zifuatazo: swali la utafiti, mbinu, sampuli (n), matokeo kuu na ukubwa wa athari, mapungufu, kiwango cha ushahidi. Maandishi: [maandishi ya kifungu]

Chini ni maandishi ya vifungu 3. Waweke kwenye jedwali la kulinganisha na safuwima zifuatazo: mwaka wa mwandishi, sampuli, njia, matokeo kuu, kiwango cha ushahidi, kizuizi. Fanya kazi tu kutoka kwa maandishi uliyopewa, usiongeze vyanzo. Maandishi: [maandishi]

Orodhesha kila dai la nambari (n, p, ukubwa wa athari, asilimia) katika maandishi haya kwenye mstari tofauti ili niweze kulithibitisha kwa makala asili. Usiongeze nambari zozote ambazo huwezi kujithibitisha. Maandishi: [muhtasari]

Mwongozo dhaifu / Mwongozo thabiti

Mwongozo dhaifu: "Toa vyanzo 10 vya kitaaluma kuhusu ufanisi wa tiba ya kitabia ya utambuzi katika unyogovu."

Mwongozo huu unaalika AI kutengeneza maelezo kutoka kwa kumbukumbu; Sehemu kubwa ya matokeo itakuwa ya uwongo.

Kidokezo chenye nguvu: "Pendekeza maneno muhimu, visawe, na mifuatano ya utafutaji ili kutafuta hifadhidata ya tiba ya utambuzi wa tabia na unyogovu. Usitoe vyanzo/manukuu; nitapata makala kutoka kwa hifadhidata halisi, kisha nikupe maandishi yao."

Kidokezo hiki kinaiweka AI katika jukumu salama (mtaalamu wa utafutaji); Marejeleo hutoka kwa chanzo halisi.

Makosa ya kawaida

• Moja kwa moja kwa kutumia sifa iliyotolewa na AI. Vyanzo vinavyoonekana vyema mara nyingi vinatengenezwa; Haitumiki kamwe bila uthibitisho.
• Kuamini kwa upofu DOI/kiungo. AI inaweza pia kutoa DOI halisi lakini haipo; Haitachukuliwa kuwa halali hadi uifungue na uikague.
• Kupuuza kiwango cha ushahidi. Bila kuuliza ikiwa kuna blogi au uchambuzi wa meta nyuma ya sentensi "tafiti zinasema".
• Kubadilisha muhtasari wa AI kwa kifungu. Ni muhtasari wa ramani; Kuweka uamuzi muhimu tu juu ya muhtasari kunamaanisha kufanya uamuzi bila kusoma maandishi.
• Inatumika katika hali moja. Daima kutumia AI katika hali ya "rasilimali kutoka kwa kumbukumbu"; ilhali iliyo salama ni hali ya "muhtasari kutoka kwa maandishi uliyopewa".

Kwa muhtasari

Katika biashara ya fasihi, AI ni kichochezi chenye nguvu cha ufafanuzi wa dhana, mkakati wa utafutaji, na muhtasari (unapotoa maandishi). Lakini yeye hutengeneza marejeleo, takwimu na matokeo kutoka kwenye kumbukumbu yake mwenyewe (hallucination). Thibitisha kila nukuu na nambari kutoka kwa chanzo msingi; Fikiria chanzo ambacho huwezi kupata batili. Weka kiwango cha ushahidi (kutoka uchanganuzi wa meta hadi ripoti ya kesi) kwa kila matokeo. Tumia AI katika hali mbili tofauti: "pendekezo lisilo na chanzo" na "muhtasari wa chanzo," na upendeleo wa mwisho.

Jukumu la maombi

Chagua mada. Kwanza uliza AI kwa nukuu 5 kwenye mada hiyo (hali ya chanzo). Kisha tafuta dondoo hizi 5 moja baada ya nyingine katika injini ya utafutaji ya kitaaluma na utambue ni ngapi zipo. Kisha pata vifungu 2 vya kweli kwenye mada hiyo hiyo, lisha maandishi yao kwa AI, na itoe jedwali la kulinganisha. Linganisha tajriba mbili: ni ipi iliyotoa matokeo ya kuaminika?

orodha ya ukaguzi

• [ ] Sikutumia marejeleo yoyote yaliyotolewa na AI bila kuyathibitisha.
• [ ] Nilipata makala kutoka kwa hifadhidata halisi, iliyopitiwa na marika.
• [ ] Kwa muhtasari, niliipa AI maandishi halisi ya kifungu (sio kutoka kwa kumbukumbu).
• [ ] Nililinganisha kila dai la nambari na maandishi asilia.
• [ ] Niliandika kiwango cha ushahidi kwa kila matokeo.
• [ ] Nilibatilisha chanzo ambacho sikuweza kupata.