zisky:
- Schopnosť používať umelú inteligenciu na zhrnutie a porovnanie skutočných zdrojov, čím sa eliminuje základ pre vymyslené pripisovanie s obmedzením „len na základe daného zdroja“
- Schopnosť uplatniť disciplínu overovania každej citácie v aktuálnom katalógu, overovania každého abstraktu späť k zdroju a zachytávania halucinácií DOI/imprintu
- Byť schopný pochopiť, ako aktuálnosť, viacjazyčnosť a šedá literatúra určujú hranice vedomostí umelej inteligencie a prečo je potrebné originálne písanie.
Archeológia a kultúrne dedičstvo je kumulatívna veda: každá nová štúdia stavia na predchádzajúcich publikáciách pokrývajúcich stáročia. Skenovanie literatúry (celkového počtu článkov, kníh, správ a téz publikovaných na túto tému) regiónu, typu nálezu alebo obdobia je prvým a najúnavnejším krokom každej vedeckej štúdie. V tejto časti podrobne uvidíme, ako AI urýchľuje prehľad literatúry, ale prečo je overenie zdroja v tejto oblasti prvoradé a ako bojovať proti najnebezpečnejšej chybe AI: halucinácii (vymyslené zdroje, citácie a informácie).
Základný princíp: AI pomáha zhrnúť, porovnať a usporiadať literatúru; Žiadna citácia však nemôže byť použitá bez potvrdenia v skutočnom katalógu a žiadne zhrnutie sa nemôže zmeniť na vedecké tvrdenie bez prečítania samotného zdroja. V humanitných vedách jeden falošný zdroj ničí dôveryhodnosť celého diela.
Prečo sú halucinácie v tejto oblasti také kritické?
Najčastejšou chybou nástrojov verejného chatu je vytváranie akademických zdrojov, ktoré neexistujú, ale vyzerajú veľmi realisticky. AI môže vytvoriť „dokonale“ vyzerajúcu citáciu kombináciou mena skutočného autora, názvu skutočného časopisu a hodnoverného názvu. Odkiaľ?
- AI vytvára „ďalšie najpravdepodobnejšie slovo“; nepozerá sa na skutočnú databázu (pokiaľ nie je pripojený špeciálny nástroj).
- Keďže akademické citácie sú vzorované, AI je veľmi „dobrá“ pri vytváraní citácií, ktoré zodpovedajú vzoru, ale ktorých obsah je vymyslený.
- V humanitných vedách si čitateľ často hneď neskontroluje zdroj; To umožňuje, aby sa falošné priradenie objavilo bez povšimnutia.
Záver: pre archeológa by mal byť každý autor-rok-názov vo výstupe AI považovaný za podozrivý, kým sa nepreukáže opak.
Tip: AI nepoužívajte ako „hľadač zdrojov“, ale ako pomocníka, ktorý „spracuje skutočné zdroje, ktoré máte“. Sami si nájdite skutočné články, poskytnite súbory PDF AI a potom povedzte „spoľahnite sa na tieto texty, ktoré som vám dal“. Tým je základ pre halucinácie do značnej miery eliminovaný.
Kroky prehľadu literatúry
- Rozsah a otázka. čo hľadáš? Objasniť tému, obdobie, región a jazykové hranice.
- Zbierka skutočných zdrojov. Nájdite autentické publikácie z katalógov knižníc, inštitucionálnych databáz a dôveryhodných adresárov. V tomto kroku je riskantné „nájsť“ zdroje pre AI.
- Sumarizácia a mapovanie. Odovzdajte skutočné texty, ktoré ste nazbierali, AI, aby zhrnula a zmapovala témy a diskusie.
- Porovnanie a analýza rozdielov. Porovnať názory rôznych autorov, nájsť rozpory a nepreskúmané medzery.
- Pravopis a pripisovanie. Napíšte svoj vlastný argument s overenými citáciami. AI dáva návrh; prepíšete svojou analýzou a skutočnými citáciami.
Disciplína overovania zdroja
Pri každej citácii skontrolujte:
- je tam? Nachádza sa autor, rok, názov, časopis/vydavateľ v skutočnom katalógu (knižnica, DOI, index)?
- Hovorí to, čo hovorí? Naozaj hovorí zdroj to, čo tvrdí AI? Otvorte zdroj a prečítajte si príslušnú časť.
- Je kontext správny? Je citát prevzatý z autorovho zámeru? Pripisuje sa opačný názor autorovi?
- Je to aktuálne a spoľahlivé? Je publikácia recenzovaná, aktuálna alebo odráža zastaraný názor?
Upozornenie: To, že sa DOI alebo inventárne číslo poskytnuté AI objaví v „správnom formáte“, neznamená, že daný záznam existuje. Vyhľadajte číslo v reálnom systéme. Neexistujúci DOI je jedným z najčastejších príznakov halucinácií.
tri mini prípady
Prípad 1 – Súhrn ušetreného času. Doktorand dal 60 reálnych článkov (všetky našiel a stiahol) do AI a vytvoril tematickú mapu; Vypracoval tabuľku porovnávajúcu názory rôznych autorov na typ nálezu za dva dni namiesto týždňov. Každý súhrn bol prevzatý a overený.
Prípad 2 – Odvrátená katastrofa falošného zvárania. Postgraduálny študent požiadal AI, aby „navrhla zdroje na túto tému“ a dostal šikovný zoznam 15 citácií. Keď to skontroloval v knižnici, zistil, že 9 zo zoznamu nikdy neexistovalo – skutoční autori, vymyslené tituly. Ak by bol tento zoznam uvedený v bibliografii práce, dôveryhodnosť obhajoby by sa zrútila a mohlo by to byť dokonca považované za vedecké pochybenie.
Prípad 3 – Opravené nesprávne priradenie. Jeden tím by uviedol, že AI povedala spisovateľovi „zaradil to miesto do rímskeho obdobia“; Keď sme sa obrátili na zdroj, bolo vidieť, že autor tvrdil opak, že lokalita bola predrímska. AI zmenila názor. Čítanie zdroja zabránilo vážnemu omylu.
Štyri kopírovateľné šablóny
1) spoliehať sa výlučne na uvedený zdroj:
Vaša úloha: asistent zhrnutia literatúry. Spoliehajte sa LEN na texty, ktoré prilepím nižšie. NEPRIDÁVAJTE žiadne informácie, zdroje ani odkazy mimo týchto textov. Zapíšte si každé svoje tvrdenie a uveďte, na ktorej časti textu, ktorý som vám dal, sa zakladá. Ak sa vás pýtajú na niečo, čo nie je v texte, povedzte „nie je to v uvedených zdrojoch“.
2) Mapa témy a porovnanie:
Nižšie uvediem zhrnutia [N] zdrojov. Zoskupte ich podľa tém a vytvorte porovnávaciu tabuľku: ku každej téme, ktorí autori hovoria čo, kde sa zhodujú, kde si protirečia. Používajte iba názory v textoch, ktoré som uviedol; pridávanie komentárov.
3) Kontrolný zoznam overenia citácie:
Pri OVEROVANÍ nižšie uvedeného zoznamu citácií vykonajte kroky, ktoré musím pre každú skontrolovať (vyhľadávanie v katalógu, potvrdenie DOI, čítanie príslušnej stránky, kontrola kontextu). NEPOTVRDZUJETE presnosť priradenia; povedzte mi, čo mám skontrolovať. Výroba zdroja.
4) Analýza medzier:
Na základe súhrnov literatúry, ktoré som poskytol, uveďte zoznam otázok/medzer, ktoré sa zdajú byť v tejto téme nedostatočne preskúmané. Pre každú medzeru ukážte, ktorý zdroj ju nechal otvorený. Spoliehajte sa len na texty, ktoré som vám dal; Nešpekulujte.
Slabá výzva / Silná výzva
Slabá výzva:
Uveďte 15 najdôležitejších akademických zdrojov na túto tému a ich zhrnutia.
AI vytvára realistický, ale pravdepodobne čiastočne vyrobený zoznam bez toho, aby sa pozrel na skutočnú databázu; Toto je samotná pasca falošnej atribúcie.
Výkonná výzva:
Nižšie uvádzam úplné citácie a zhrnutia 12 skutočných článkov, ktoré som našiel. LEN na základe nich sa objaví tematická mapa a porovnávacia tabuľka. PRIDAŤ nový zdroj. Uveďte, z ktorého článku pochádza každý riadok. Označte chýbajúce témy ako „nezahrnuté v tejto sade zdrojov“.
Rozdiel: prvý je plný rizika umelých zdrojov; ten druhý spoľahlivo narába so skutočnými zdrojmi.
Aktuálnosť, jazyk a šedá literatúra
Tri znaky archeologickej literatúry spôsobujú, že používanie AI je obzvlášť riskantné. Prvým je aktuálnosť: znalosť modelu je zmrazená k určitému dátumu a absentujú v ňom vykopávky, nové datovanie a opravy po tomto dátume. AI môže prezentovať nahradený pohľad ako stále platný; Preto by ste mali skenovať aktuálne publikácie. Po druhé, viacjazyčnosť: archeológia je napísaná v nemčine, francúzštine, taliančine, turečtine a mnohých miestnych jazykoch iných ako angličtina. Dôležitá správa o výkopoch mohla byť publikovaná len v jednom jazyku; Spoliehať sa výlučne na zdroje v anglickom jazyku znamená, že chýba veľká časť literatúry. AI pomáha pri skenovaní týchto cudzojazyčných zdrojov, ale opäť musíte mať po ruke skutočný zdroj.
Po tretie, šedá literatúra: prevažná väčšina archeologických poznatkov spočíva v dokumentoch, ktoré sa neobjavujú v oficiálnych časopisoch, ako sú komerčné správy o výskumoch, inštitucionálne archívy a nepublikované práce. Šedá literatúra (správy vytvorené v komerčných alebo podnikových kanáloch, ktoré nie sú ľahko dostupné v tradičných adresároch publikácií) buď chýba, alebo je v údajoch o AI málo; Preto AI tieto informácie buď nepozná, alebo si ich vymýšľa. Skutočný archeologický príbeh regiónu je často v tejto sivej literatúre a dostanete sa k nemu len skutočnou rukou z inštitucionálnych archívov.
Tip: Povedať „AI nemohla nájsť nič“ alebo „existuje málo zdrojov“ na tému neznamená, že je na tejto téme málo práce; Často je zdroj v sivej literatúre, v cudzom jazyku alebo po informačnej časti modelu. Opýtajte sa skutočného archívu na nedostatok zdrojov, nie AI.
Tabuľka úloh z literatúry
Quest
Úloha AI
ľudské rozhodnutie
overenie
získavanie zdrojov
Slabý/ohrozený
Výber z reálneho katalógu
Potvrdenie katalógu
sumarizovanie
Silný (k danému textu)
presnosť, výber
Prečítajte si zdroj
Porovnanie
Mapa tém/rozporov
Komentár, váha
zdrojový kontext
Písanie citácií
osnova formátu
obsah, presnosť
Je tam/hovorí
Analýza medzier
Kandidátske otázky
Výskumná hodnota
Znalosť domény
Časté chyby
- Aby AI „našla“ zdroje. Vytvára falošné prisudzovanie; Nájdite zdroje sami.
- Spoliehanie sa na formát DOI/imprint. Hoci sa formát javí ako správny, záznam môže byť vyrobený; Hľadajte v systéme.
- Použitie súhrnu bez čítania zdroja. AI dokáže zvrátiť pohľad autora.
- Publikovanie textu AI tak, ako je. Originalita a riziko plagiátorstva; Napíšte s vlastnou analýzou.
- Neumiestnenie obmedzenia „len daný zdroj“. Bez obmedzení pridáva AI externe vyrobené informácie.
V súhrne
V prehľade literatúry AI ušetrí veľa času pri sumarizovaní, porovnávaní a analýze faktických zdrojov. Ale v humanitných vedách je overenie zdroja nemenné: nájdite si zdroje sami, overte každú citáciu v skutočnom katalógu, spätne skontrolujte každý abstrakt, zaveďte obmedzenie „len citovaný zdroj“ a napíšte konečný text s vlastnou originálnou analýzou. Falošný zdroj zničí vašu prácu.
Aplikačná úloha
Vyberte si tému, nájdite 8-10 skutočných publikácií v knižnici/indexe a zozbierajte ich citácie. Vytvorte porovnávaciu tabuľku so šablónami „Iba na základe zdroja“ a „Mapa témy“. V samostatnom experimente povedzte AI, aby „navrhla zdroj“ (bez akýchkoľvek obmedzení) a skontrolujte citácie, ktoré navrhuje, jednu po druhej v katalógu a všimnite si, koľko je skutočných.
kontrolný zoznam
- [ ] Zdroje som si našiel sám zo skutočných katalógov.
- [ ] Obmedzenie „spoliehať sa len na daný zdroj“ som dal na AI.
- [ ] Potvrdil som každú citáciu s katalógom/DOI.
- [ ] Každý súhrn som overil návratom k zdroju.
- [ ] Finálny text som napísal s vlastnou originálnou analýzou a potvrdenými referenciami.