Jednotka 5 / 12

Skenovanie zdroja, zisťovanie a sumarizácia

zisky:

  • Schopnosť urýchliť objavovanie skenovaním veľkých hromad dokumentov pomocou umelej inteligencie, eliminovaním a zhrnutím toho, čo je relevantné
  • Pochopte, že zhrnutie je objaviteľská mapa, nie dôkaz, a buďte schopní prepojiť každý dôležitý bod a citát späť s pôvodným dokumentom.
  • Schopnosť skenovať prípady a kontrolovať elimináciu pomocou vzoriek bez toho, aby umelá inteligencia produkovala výsledky/komentáre

Jednou z najväčších prekážok v historickom výskume je hľadanie „toho, čo funguje“ v obrovskej hromade materiálu. Výskumník môže musieť naskenovať stovky dokumentov, zväzkov novín, registrov alebo korešpondenčných súborov kvôli práci alebo článku. Táto úloha kontroly zdrojov si tradične vyžaduje čítanie stránku po stránke a môže trvať týždne. AI otvára túto prekážku rýchlym skenovaním a zhrnutím veľkých častí textu a označením relevantných miest. Ale aj tu je nebezpečenstvo jasné: súhrn AI nenahrádza zdroj; je to len mapa, ktorá vás nasmeruje k skutočnému zdroju.

V tejto jednotke sa naučíte, ako skenovať veľký historický materiál pomocou AI, vytvárať spoľahlivé súhrny, nájsť relevantné pasáže a vyhnúť sa najnebezpečnejšej nástrahe súhrnu: „dôverovať súhrnu bez toho, aby ste museli ísť k zdroju“. Cieľom je použiť AI na rýchlosť bez toho, aby ste obetovali presnosť; Keď sa tieto dva ciele dobre používajú, nie sú v rozpore, ale skôr sa navzájom vyživujú.

Zhrnutie nenahrádza zdroj

Uveďme si základný princíp od začiatku: AI ​​brief je nástroj na objavovanie, nie dôkaz. Ak sa historik chystá zahrnúť udalosť, citát alebo údaj do svojej štúdie, musí to vziať z pôvodného dokumentu, nie zo súhrnu AI. Zhrnutie hovorí: "v tomto dokumente je niečo také, pozrite sa na to"; Nehovorí, že "presne to stojí v dokumente". Pretože súhrnný proces komprimuje, vyberá, niekedy skresľuje a niekedy pridáva niečo, čo vôbec neexistuje.

AI môžete použiť v troch výkonných úlohách pri skenovaní:

  1. Skenujte a preosievajte: Rýchlo označte medzi stovkami dokumentov, ktoré sú relevantné pre vašu tému.
  2. Zhrnutie: Načrtnutie obrysov, ľudí a tém dlhého dokumentu.
  3. Vyhľadanie pasáže: Označenie otázky „Kde sú miesta, kde sa hovorí o tejto téme“ v dokumente.

Vo všetkých troch je výstupom "presmerovanie"; Dôkazy sú prevzaté z pôvodného dokumentu.

Prehliadaným nebezpečenstvom je tu limit kontextového okna AI – množstvo textu, ktoré model dokáže spracovať naraz. Keď dáte naraz veľmi veľký balík dokumentov, AI ​​môže „zabudnúť“ alebo prelistovať stredné časti; má tendenciu klásť dôraz na to, čo sa deje na začiatku a na konci. Preto namiesto toho, aby sa stovky dokumentov zmestili do jednej požiadavky, ich rozdelenie do logických skupín a skenovanie každej skupiny samostatne poskytuje spoľahlivejšie výsledky. Okrem toho je kontrola vzoriek nevyhnutná na rozlíšenie, či dokument, ktorý AI „nikdy nespomína“, je skutočne irelevantný alebo vynechaný.

Pracovný postup: krok za krokom

1. Ujasnite si výskumnú otázku. Skôr jasná otázka než vágne „zhrňte mi to“: „Kde sú miesta v týchto 40 dokumentoch, ktoré spomínajú spor o vodné práva?

2. Pripravte si ingrediencie. Upravte texty, ktoré sa majú skenovať (prepis alebo výstup OCR). Ku každému dielu pripojte názov/odkaz zdroja, aby bolo možné súhrn prepojiť so zdrojom.

3. Poskytnite pokyny na skenovanie/súhrn. Požiadajte AI, aby sa spoliehala výlučne na text, ktorý poskytnete, pričom každý nárok prepojila so zdrojom (dokument/stránka) a nepridala nič, čo neexistuje.

4. Prepojte súhrn späť so zdrojom. Nájdite a overte v originálnom dokumente každý dôležitý bod označený súhrnom. Citácie z dokumentu prevezmite doslovne.

5. Otázka medzier a zaujatosti. Čo mohla AI vynechať? Vyzdvihol len to, čo je zrejmé? Vybral si ten, ktorý vyhovuje vašej otázke a zatajil opak?

Upozornenie: Pri generovaní súhrnu môže AI ​​pridať odkaz alebo výsledok, ktorý nie je v dokumente, pretože sa to „zdá logické“. Najmä "aký záver možno vyvodiť z týchto dokumentov?" Otázky ako tieto vyzývajú AI, aby vytvorila interpretácie a závery. Ponechajte súhrnnú žiadosť vecnú; komentár si nechajte pre seba.

Skenovanie úloh pomocou tabuľky

Quest

Príspevok AI

Riziko

overenie

Odstráňte príslušný dokument

rýchlosť

Preskočiť relevantné

kontrola vzorky

Zhrnutie dokumentu

obrys

Warp/add

Porovnaj so zdrojom

Nájdenie pasáže/citátu

záložkovanie

nesprávne umiestnenie

nájsť v dokumente

Porovnávacie zhrnutie

označenie vzorom

montážny odkaz

Potvrďte každý nárok

Citovanie

návrh

zámena slov

slovo za slovom

Zhrnutie: AI ukazuje, kde sa nachádza; Skutočný dokument hovorí, čo sa stalo.

tri mini prípady

Prípad 1 – 300 dokumentov skrátených na 2 dni. Výskumník študoval spor o vodné práva v meste v rokoch 1900-1920. Ručné skenovanie série 300 dokumentov by trvalo týždne. AI označila každý dokument ako „súvisí s právami na vodu“; 42 z 300 dokumentov sa ukázalo ako relevantných. Výskumník si do hĺbky prečítal iba týchto 42. Skontroloval však aj 20 z 258 dokumentov označených ako irelevantné ako vzor; Zistil som, že 2 spolu skutočne súvisia a opravili to. Ponaučenie: eliminácia sa zrýchľuje, ale musí byť kontrolovaná vzorkou.

Prípad 2 – falošný výsledok. Študent požiadal YZ, aby zhrnul 15 dokumentov a požiadal o „záver z týchto dokumentov“. AI napísala vzťah príčina-následok, ktorý v dokumentoch neexistoval ako „výsledok“ v plynulom jazyku. Keď študent prechádzal dokumenty, videl, že takýto záver nie je podložený v žiadnom dokumente. Ponaučenie: nenechajte AI produkovať výklad a závery; Získajte skenovanie prípadu a vy rozhodnete o výsledkoch.

Prípad 3 – Upravená cenová ponuka. Autor by do svojho článku vložil „citát“ z abstraktu AI. Keď to porovnal s dokumentom, všimol si, že AI ​​vetu zjednodušila a zmenila niekoľko slov. Citát už nebol presne taký istý, ako bol napísaný v dokumente. Ponaučenie: každý citát je prevzatý doslovne z dokumentu, nie z abstraktu.

Štyri kopírovateľné šablóny

1) Skenovanie závislé od zdroja:

Nižšie sú uvedené časti dokumentu, pričom každá je označená príslušným odkazom. Moja výskumná otázka: [otázka]. Pri každom dokumente jednoducho označte „relevantné/irelevantné/neisté“ a ak je to relevantné, uveďte, pre ktorú vetu/pasáž je relevantná a odkaz na dokument. Pridávanie komentárov, vyvodzovanie záverov. Dokumentácia: [tu]

2) Verné zhrnutie:

Zhrňte dokument nižšie. Pravidlá: (1) Píšte len to, čo je v texte, NEPRIPÁDAJTE závery/komentáre/závery. (2) Prepojte každý dôležitý bod s jeho miestom (odsek/strana) v dokumente. (3) Ak potrebujete citovať, dajte to slovo za slovom, nemeňte to. (4) Napíšte „nešpecifikované“ informácie, ktoré nie sú v texte. Dokument: [tu]

3) Vyhľadávač priechodov:

VŠETKY zmienky o tejto téme nájdete v texte nižšie: [téma]. Ku každému uveďte stručnú cenovú ponuku (doslovne) a jej umiestnenie. Pridávanie miest, ktoré nezahŕňajú tému. Označte zhodu, ktorou si nie ste istí, ako [nejasné]. Text: [tu]

4) Porovnanie prípadu:

Nižšie sú uvedené dva/tri dokumenty. Uveďte, ČO každý dokument hovorí na túto tému [téma], oddelene, s jeho zdrojom. VYTVORENIE „záveru“ alebo „celkového hodnotenia“ medzi dokumentmi; Stačí dať každému dokumentu jeho vlastné vyhlásenie ako fakt. Dokumentácia: [tu]

Slabá výzva / Silná výzva

slabé:

Prečítajte si tieto dokumenty a zhrňte, čo mi hovoria o téme, výsledkoch a ich dôležitosti.

Túžba po „následkoch“ a „významnosti“ tlačí AI k odklonu od skutočnosti a vymýšľaniu interpretácií a súvislostí; Nepripája sa ani k zdroju.

Silný:

Uveďte fakty o [téme] v nasledujúcich dokumentoch, pričom každý z nich uveďte odkaz na dokument. PRIDAJTE komentár, záver alebo hodnotenie dôležitosti. Dajte úvodzovky slovo za slovom. Ak sa téma v dokumente neuvádza, napíšte „neuvedené“. Dokumentácia: [tu]

Rozdiel: vernosť skutočnosti, prepojenie so zdrojom, zákaz interpretácie a doslovné citovanie premieňajú súhrn na spoľahlivú mapu objavov.

Časté chyby

  • Zámena súhrnu za dôkaz. Súhrn vedie; Dôkazy sú prevzaté z pôvodného dokumentu.
  • Prikázanie AI, aby „vyvodila závery“. Interpretácia a príčina a následok sú úlohou historika; AI skenuje prípady.
  • Prevzatie citátu z abstraktu. AI zjednodušuje/nahrádza úvodzovky; Každý citát je doslovne prevzatý z dokumentu.
  • Vôbec nedohliada na elimináciu. Ak tie, ktoré sú označené ako „irelevantné“, nie sú skontrolované so vzorkou, dôležité dokumenty budú chýbať.
  • Nepýtať sa na medzery. Je potrebné si položiť otázku, čo AI vynecháva a čo skresľuje.

V súhrne

Skenovanie a sumarizácia zdrojov je jednou z oblastí, kde AI šetrí najviac času pri skúmaní histórie: prehrabáva stovky dokumentov, sumarizuje ich a označuje relevantné pasáže. Ale zhrnutie je mapa objavu, nie dôkaz. Prepojte každý kľúčový bod späť s pôvodným dokumentom, vezmite doslovné citácie z dokumentu, nenechajte AI produkovať závery a interpretácie, kontrolujte elimináciu vzorkovaním a spochybňujte, čo AI vynechala. AI vás zavedie na správnu stránku; Vašou úlohou je prečítať si túto stránku a dať jej zmysel.

Aplikačná úloha

Zhromaždite aspoň 10 kusov dokumentácie súvisiacej s vašou témou a ku každej pripojte referencie. Odstráňte tie, ktoré súvisia so vzorom „skenovania založeného na zdroji“; potom si sami skontrolujte niektoré z tých, ktoré sú označené ako „irelevantné“ ako vzorku. Nechajte si „verné zhrnutie“ zhrnúť jeden z relevantných výstupov a nájsť a overiť každý kľúčový bod v zhrnutí v dokumente. Všimnite si, koľko bodov AI pridá alebo skreslí.

kontrolný zoznam

  • [ ] Začal som jasnou výskumnou otázkou.
  • [ ] Ku každej dokumentácii som pripojil odkaz na zdroj.
  • [ ] Každý bod súhrnu som prepojil späť s pôvodným dokumentom.
  • [ ] Citácie som prevzal doslovne z dokumentu.
  • [ ] Kontroloval som elimináciu vzorkovaním a spochybnil som medzery.