Enota 7 / 11

Pregled literature, preverjanje vira in boj proti halucinaciji

Dobički:

  • Sposobnost uporabe umetne inteligence za povzemanje in primerjavo resničnih virov, odpravljanje podlage za izmišljeno pripisovanje z omejitvijo "samo na podlagi danega vira"
  • Sposobnost uporabe discipline preverjanja vsakega citata v dejanskem katalogu, preverjanja vsakega povzetka nazaj do vira in lovljenja halucinacij DOI/odtisa
  • Biti sposoben razumeti, kako aktualnost, večjezičnost in siva literatura določajo meje znanja umetne inteligence in zakaj je potrebno izvirno pisanje.

Arheologija in kulturna dediščina sta kumulativni vedi: vsaka nova študija temelji na prejšnjih publikacijah, ki zajemajo stoletja. Pregledovanje literature (celote člankov, knjig, poročil in tez, objavljenih na to temo) neke regije, vrste najdbe ali obdobja je prvi in ​​najbolj naporen korak vsake znanstvene raziskave. V tej enoti bomo poglobljeno videli, kako umetna inteligenca pospeši pregled literature, zakaj je preverjanje virov najpomembnejše na tem področju in kako se boriti proti najnevarnejši napaki umetne inteligence: halucinacije (izmišljeni viri, citati in informacije).

Osnovno načelo: AI pomaga povzemati, primerjati in organizirati literaturo; Toda nobenega citata ni mogoče uporabiti brez potrditve v pravem katalogu in noben povzetek se ne more spremeniti v znanstveno trditev, ne da bi prebrali sam vir. V humanistiki en lažni vir uniči verodostojnost celotnega dela.

Zakaj so halucinacije tako kritične na tem področju?

Najpogostejša napaka orodij za javni klepet je ustvarjanje akademskih virov, ki ne obstajajo, a so videti zelo realistični. Umetna inteligenca lahko sestavi "popoln" citat tako, da združi ime pravega avtorja, ime prave revije in verjeten naslov. od kje?

  • AI ustvari "naslednjo najverjetnejšo besedo"; ne pogleda dejanske baze podatkov (razen če je povezano posebno orodje).
  • Ker so akademski citati vzorčni, je umetna inteligenca zelo "dobra" pri ustvarjanju citata, ki ustreza vzorcu, vendar je njegova vsebina izmišljena.
  • V humanistiki bralec pogosto ne preveri takoj vira; To omogoča, da lažno pripisovanje ostane neopaženo.

Zaključek: za arheologa mora biti vsak trojček avtor-leto-naslov v izhodu AI sumljiv, dokler se ne dokaže nasprotno.

Namig: umetne inteligence ne uporabljajte kot "iskalnik virov", temveč kot pomočnika, ki "obdeluje resnične vire, ki jih imate." Sami poiščite dejanske članke, dajte PDF-je AI in recite "samo zanesite se na ta besedila, ki sem vam jih dal". Tako je osnova za halucinacije v veliki meri odpravljena.

Koraki pregleda literature

  1. Obseg in vprašanje. kaj iščeš Pojasnite temo, obdobje, regijo in jezikovne meje.
  2. Zbirka pravih virov. Poiščite verodostojne publikacije v knjižničnih katalogih, institucionalnih bazah podatkov in zaupanja vrednih imenikih. Na tem koraku je tvegano "najti" vire za AI.
  3. Povzemanje in kartiranje. Predajte dejanska besedila, ki ste jih zbrali, AI, da povzame in preslika teme in razprave.
  4. Primerjava in analiza vrzeli. Primerjajte poglede različnih avtorjev, poiščite protislovja in neraziskane vrzeli.
  5. Črkovanje in pripisovanje. Napišite svoj argument s preverjenimi citati. AI daje osnutek; prepišete s svojo analizo in dejanskimi citati.

Disciplina preverjanja vira

Za vsak citat preverite:

  • Ali obstaja? Ali se avtor, leto, naslov, revija/založnik nahajajo v dejanskem katalogu (knjižnici, DOI, indeksu)?
  • Ali pravi, kar pravi? Ali vir res pravi to, kar trdi AI? Odprite vir in preberite ustrezen razdelek.
  • Ali je kontekst pravilen? Ali je citat vzet iz avtorjevega namena? Ali je nasprotno mnenje pripisano avtorju?
  • Ali je posodobljen in zanesljiv? Ali je publikacija recenzirana, aktualna ali odraža zastarel pogled?
Pozor: Samo zato, ker se DOI ali inventarna številka, ki jo zagotovi AI, pojavi v "pravilni obliki", ne pomeni, da ta zapis obstaja. Poiščite številko v realnem sistemu. Neobstoječ DOI je eden najpogostejših znakov halucinacij.

trije mini kovčki

Primer 1 – povzetek prihranjenega časa. Doktorski študent je dal 60 resničnih člankov (vse je našel in prenesel) AI in ustvaril tematski zemljevid; V dveh dneh namesto v tednih je sestavil tabelo, v kateri je primerjal poglede različnih avtorjev na vrsto najdbe. Vsak povzetek je bil pridobljen in preverjen.

Primer 2 – Preprečena lažna varilna katastrofa. Podiplomski študent je prosil AI, naj "predlaga vire o tej temi" in dobil odličen seznam 15 citatov. Ko ga je preveril v knjižnici, je ugotovil, da 9 s seznama nikoli ni obstajalo - pravi avtorji, izmišljeni naslovi. Če bi ta seznam vključili v bibliografijo diplomske naloge, bi verodostojnost zagovora padla in bi ga lahko šteli celo za znanstveno napako.

Primer 3 – Nepravilno pripisovanje popravljeno. Ena ekipa bi poročala, da je umetna inteligenca nekemu piscu povedala, "datira to mesto v rimsko obdobje"; Ko smo se obrnili na vir, se je videlo, da avtor trdi nasprotno, da je najdišče predrimsko. AI je obrnil pogled. Branje vira je preprečilo resno napako.

Štiri predloge za kopiranje

1) Zanašanje izključno na navedeni vir:

Vaša vloga: pomočnik pri povzetku literature. Zanašajte se SAMO na besedila, ki jih bom prilepil spodaj. NE DODAJAJTE nobenih informacij, virov ali referenc izven teh besedil. Zapišite vsako svojo trditev in navedite, na katerem delu besedila, ki sem vam ga dal, temelji. Če vas vprašajo o nečem, česar ni v besedilu, recite "tega ni v navedenih virih."

2) Zemljevid teme in primerjava:

Spodaj bom podal povzetke [N] virov. Združite jih po temah in sestavite primerjalno tabelo: za vsako temo, kateri avtorji kaj pravijo, kje se strinjajo, kje si nasprotujejo. Uporabite samo poglede v besedilih, ki sem jih navedel; dodajanje komentarjev.

3) Kontrolni seznam za preverjanje citatov:

Pri PREVERJANJU spodnjega seznama navedb izvedite korake, ki jih moram preveriti za vsakega (iskanje v katalogu, potrditev DOI, branje ustrezne strani, preverjanje konteksta). NE potrjujete točnosti pripisov; povej mi kaj naj preverim. Izdelava vira.

4) Analiza vrzeli:

Na podlagi povzetkov literature, ki sem jih posredoval, naštejte vprašanja/vrzeli, ki se zdijo premalo raziskana o tej temi. Za vsako vrzel pokažite, kateri vir jo je pustil odprto. Zanašajte se samo na besedila, ki sem vam jih dal; Ne ugibajte.

Šibek poziv/močan poziv

Šibek poziv:

Navedite 15 najpomembnejših akademskih virov o tej temi in njihove povzetke.

Umetna inteligenca izdela realističen, a verjetno delno izdelan seznam, ne da bi pogledala pravo bazo podatkov; To je sama lažna past pripisovanja.

Močan poziv:

Spodaj prilepim celotne citate in povzetke 12 resničnih člankov, ki sem jih našel. SAMO na podlagi teh se pojavita tematski zemljevid in primerjalna tabela. DODAJ nov vir. Označite, iz katerega člena prihaja posamezna vrstica. Označite manjkajoče teme kot "niso zajete v tem naboru virov."

Razlika: prva je polna tveganja izmišljenih virov; slednji zanesljivo upravlja z realnimi viri.

Aktualnost, jezik in siva literatura

Zaradi treh značilnosti arheološke literature je uporaba AI še posebej tvegana. Prvi je aktualnost: poznavanje modela je zamrznjeno na določenem datumu, izkopavanj, novih datacij in popravkov po tem datumu pa ni. AI lahko nadomeščeni pogled predstavi kot še vedno veljavnega; Zato morate skenirati trenutne publikacije. Drugič, večjezičnost: arheologija je napisana v nemščini, francoščini, italijanščini, turščini in številnih lokalnih jezikih, razen angleščine. Pomembno poročilo o izkopavanju je bilo morda objavljeno samo v enem jeziku; Zanašati se zgolj na angleške vire pomeni izpustiti velik del literature. Umetna inteligenca pomaga pri skeniranju teh tujejezičnih virov, vendar morate znova imeti pri roki dejanski vir.

Tretjič, siva literatura: velika večina arheološkega znanja je v dokumentih, ki se ne pojavljajo v uradnih časopisih, kot so komercialna poročila o izkopavanjih, institucionalni arhivi in ​​neobjavljene disertacije. Siva literatura (poročila, ustvarjena v komercialnih ali korporativnih kanalih, ki niso na voljo v tradicionalnih imenikih publikacij) v podatkih o usposabljanju umetne inteligence ni ali pa je redka; Zato AI teh informacij ne pozna ali pa si jih izmisli. Prava arheološka zgodba neke regije je pogosto v tej sivi literaturi in do nje lahko prideš le s pravo roko iz institucionalnih arhivov.

Namig: Če rečete, da "AI ni mogel najti ničesar" ali "obstaja malo virov" o temi, to ne pomeni, da je na tej temi malo dela; Pogosto je vir v sivi literaturi, v tujem jeziku ali po informacijskem delu modela. O pomanjkanju virov vprašajte pravi arhiv, ne AI.

Tabela nalog za književnost

Iskanje

Vloga AI

človeška odločitev

preverjanje

pridobivanje virov

Šibko/ogroženo

Izbor iz pravega kataloga

Potrditev kataloga

povzemanje

Močno (na dano besedilo)

natančnost, izbira

Preberite vir

Primerjava

Zemljevid teme/kontradikcije

Komentar, teža

izvorni kontekst

Pisanje citatov

oris formata

vsebina, točnost

Ali obstaja/ali piše

Analiza vrzeli

Vprašanja kandidatov

Raziskovalna vrednost

Domensko znanje

Pogoste napake

  • Naredite, da AI "najde" vire. Proizvaja lažno pripisovanje; Vire poiščite sami.
  • Zanašanje na format DOI/odtis. Čeprav se oblika zdi pravilna, je zapis morda ponarejen; Iskanje v sistemu.
  • Uporaba povzetka brez branja vira. AI lahko obrne avtorjev pogled.
  • Objava besedila AI, kot je. Izvirnost in tveganje plagiatorstva; Pišite s svojo analizo.
  • Brez postavljanja omejitve "samo dani vir". Umetna inteligenca brez omejitev doda zunanje izdelane informacije.

Če povzamem

Pri pregledu literature AI prihrani veliko časa pri povzemanju, primerjavi in analizi dejanskih virov. Toda v humanistiki se o preverjanju vira ni mogoče pogajati: sami poiščite vire, preverite vsak citat v dejanskem katalogu, preverite vsak povzetek, naložite omejitev "samo citirani vir" in napišite končno besedilo s svojo izvirno analizo. Lažni vir bo uničil vaše delo.

Aplikacijska naloga

Izberite temo, poiščite 8-10 pravih publikacij v knjižnici/indeksu in zberite njihove citate. Naredite primerjalno tabelo s predlogama »Samo na podlagi vira« in »Tematski zemljevid«. V ločenem poskusu recite AI ​​naj "predlaga vir" (brez kakršnih koli omejitev) in preverite citate, ki jih predlaga enega za drugim v katalogu, in zabeležite, koliko jih je resničnih.

kontrolni seznam

  • [ ] Vire sem našel sam iz pravih katalogov.
  • [ ] Na AI sem postavil omejitev "zanašaj se samo na dani vir".
  • [ ] Vsak citat sem potrdil s katalogom/DOI.
  • [ ] Vsak povzetek sem preveril tako, da sem se vrnil k viru.
  • [ ] Končno besedilo sem napisal z lastno izvirno analizo in potrjenimi referencami.