Jedinica 5 / 12

Skeniranje izvora, otkrivanje i sažimanje

Dobici:

  • Sposobnost ubrzavanja otkrivanja skeniranjem velikih hrpa dokumenata s umjetnom inteligencijom, eliminiranjem i sažimanjem onoga što je relevantno
  • Shvatite da je sažetak karta otkrića, a ne dokaz, i budite sposobni povezati svaku važnu točku i citat s izvornim dokumentom.
  • Sposobnost skeniranja slučajeva i provjere eliminacije s uzorcima bez potrebe da umjetna inteligencija proizvodi rezultate/komentare

Jedno od najvećih uskih grla u povijesnom istraživanju je pronalaženje "onog što funkcionira" u ogromnoj hrpi materijala. Istraživač će možda morati skenirati stotine dokumenata, novinskih svezaka, registara ili datoteka korespondencije za tezu ili članak. Ovaj zadatak pregleda resursa tradicionalno zahtijeva čitanje stranice po stranicu i može trajati tjednima. AI otvara ovo usko grlo brzim skeniranjem i sažimanjem velikih dijelova teksta i označavanjem relevantnih mjesta. Ali i ovdje je opasnost jasna: AI sažetak ne zamjenjuje izvor; to je samo karta koja vas upućuje na pravi izvor.

U ovoj ćete jedinici naučiti kako pomoću umjetne inteligencije skenirati veliki povijesni materijal, izraditi pouzdane sažetke, pronaći relevantne odlomke i izbjeći najopasniju zamku sinopsisa: "vjerovati sinopsisu bez odlaska na izvor". Cilj je koristiti AI za brzinu, a da pritom nikada ne žrtvujete točnost; Kada se dobro koriste, ova dva cilja se ne sukobljavaju, već se međusobno hrane.

Sažetak ne zamjenjuje izvor

Izložimo osnovno načelo od početka: AI brief je alat za otkrivanje, a ne dokaz. Ako će povjesničar uključiti događaj, citat ili podatak u svoju studiju, mora ih uzeti iz izvornog dokumenta, a ne iz AI-jeva sažetka. Sažetak kaže: "postoji nešto poput ovoga u ovom dokumentu, idite pogledati"; Ne kaže "upravo tako piše u dokumentu". Jer proces sažetka sažima, odabire, ponekad iskrivljuje, a ponekad dodaje nešto što uopće ne postoji.

AI možete koristiti u tri moćna posla u skeniranju:

  1. Skenirajte i prosijte: brzo označite među stotinama dokumenata koji su relevantni za vašu temu.
  2. Sažimanje: Ocrtavanje obrisa, osoba i tema dugog dokumenta.
  3. Pronalaženje odlomka: Označavanje pitanja "Gdje su mjesta koja govore o ovoj temi" u dokumentu.

U sva tri, izlaz je "preusmjeravanje"; Dokazi su preuzeti iz originalnog dokumenta.

Zanemarena opasnost ovdje je ograničenje kontekstnog prozora umjetne inteligencije — količina teksta koju model može obraditi odjednom. Kada date vrlo veliku hrpu dokumenata odjednom, AI može "zaboraviti" ili preletjeti kroz središnje dijelove; nastoji staviti naglasak na ono što se događa na početku i na kraju. Stoga, umjesto uklapanja stotina dokumenata u jedan zahtjev, njihovo dijeljenje u logične skupine i skeniranje svake skupine zasebno daje pouzdanije rezultate. Dodatno, provjera uzorka ključna je kako bi se razlučilo je li dokument koji umjetna inteligencija "nikad ne spominje" doista irelevantan ili izostavljen.

Tijek rada: korak po korak

1. Pojasnite istraživačko pitanje. Jasno pitanje, a ne nejasno "sažmi mi ovo": "Gdje su mjesta u ovih 40 dokumenata koja spominju spor oko prava na vodu?"

2. Pripremite sastojke. Uredite tekstove za skeniranje (prijepis ili OCR izlaz). Priložite naziv/referencu izvora uz svaki članak kako bi se sažetak mogao povezati s izvorom.

3. Dajte upute za skeniranje/sažetak. Zamolite AI da se oslanja isključivo na tekst koji date, povezujući svaku tvrdnju s izvorom (dokumentom/stranicom) i ne dodajući ništa što ne postoji.

4. Povežite sažetak s izvorom. Pronađite i provjerite u izvornom dokumentu svaku važnu točku označenu sažetkom. Uzmite doslovne citate iz dokumenta.

5. Praznine i pristranost pitanja. Što je umjetna inteligencija možda propustila? Je li samo istaknuo očito? Je li izabrao onu koja odgovara vašem pitanju, a sakrio suprotno?

Oprez: Prilikom generiranja sažetka, AI može dodati poveznicu ili rezultat koji nije u dokumentu jer se "čini logičnim". Pogotovo "kakav se zaključak može izvući iz ovih dokumenata?" Pitanja poput ovih pozivaju AI na tumačenja i zaključke. Neka sažetak zahtjeva bude činjeničan; zadrzi komentar za sebe.

Skeniranje zadataka s tablicom

Potraga

Doprinos AI

Rizik

provjera

Uklonite relevantni dokument

brzina

Preskoči relevantno

kontrola uzorka

Sažetak dokumenta

obris

Iskriviti/dodati

Usporedi s izvorom

Pronalaženje odlomka/citata

označavanje knjižnih oznaka

pogrešna lokacija

pronaći u dokumentu

Usporedni sažetak

označavanje uzorka

fiting link

Potvrdite svaku tvrdnju

Citiranje

nacrt

zamjena riječi

riječ po riječ

Sažetak: AI pokazuje gdje je; Stvarni dokument govori što se dogodilo.

tri mini kućišta

Slučaj 1 — 300 dokumenata smanjeno na 2 dana. Istraživač je proučavao gradski spor oko prava na vodu 1900-1920. Ručno skeniranje serije od 300 dokumenata trajalo bi tjednima. AI je označio svaki dokument kao "je li povezan s pravima na vodu"; Od 300 dokumenata 42 su se pokazala relevantnima. Istraživač je detaljno pročitao samo ova 42. Ali također je provjerio 20 od 258 dokumenata koji su označeni kao nevažni kao uzorak; Otkrio sam da su 2 zapravo povezane i popravio to. Lekcija: eliminacija se ubrzava, ali se mora kontrolirati uzorkom.

Slučaj 2 — Lažni rezultat. Student je zamolio YZ da sažme 15 dokumenata i zatraži "zaključak iz ovih dokumenata". AI je tečnim jezikom napisao uzročno-posljedičnu vezu koja nije postojala u dokumentima kao "rezultat". Kada je student pregledao dokumente, vidio je da takav zaključak nije potkrijepljen ni u jednom dokumentu. Lekcija: nemojte AI proizvoditi tumačenje i zaključak; Dobijte skeniranje slučaja, vi odlučujete o rezultatima.

Slučaj 3 — Izmijenjena ponuda. Autor bi stavio "citat" iz sažetka AI u svoj rad. Kada ju je usporedio s dokumentom, primijetio je da je umjetna inteligencija pojednostavila rečenicu i promijenila nekoliko riječi. Citat više nije bio potpuno isti kao što je napisano u dokumentu. Lekcija: svaki citat je doslovce uzet iz dokumenta, a ne iz sažetka.

Četiri predloška za kopiranje

1) Skeniranje ovisno o izvoru:

Ispod su dijelovi dokumenta, svaki označen svojom referencom. Moje istraživačko pitanje: [pitanje]. Za svaki dokument jednostavno označite "relevantno/irelevantno/nesigurno" i, ako je relevantno, navedite za koju rečenicu/odlomak je relevantan i referencu dokumenta. Dodavanje komentara, izvođenje zaključaka. Dokumentacija: [ovdje]

2) Vjeran sažetak:

Sažeti dokument u nastavku. Pravila: (1) Pišite samo ono što je u tekstu, NE DODAVAJTE zaključke/komentare/zaključke. (2) Povežite svaku važnu točku s njezinim mjestom (odlomak/stranica) u dokumentu. (3) Ako trebate citirati, navedite riječ po riječ, nemojte je mijenjati. (4) Napišite "neodređene" podatke kojih nema u tekstu. Dokument: [ovdje]

3) Pronalazač prolaza:

Pronađite SVA spominjanja ove teme u donjem tekstu: [tema]. Za svaki navedite kratak citat (doslovno) i mjesto gdje se nalazi. Dodavanje mjesta koja ne uključuju temu. Označite podudaranje za koje niste sigurni kao [nejasno]. Tekst: [ovdje]

4) Usporedni pregled slučaja:

Ispod su dva/tri dokumenta. Navedite ŠTO svaki dokument govori o ovoj temi [topic], odvojeno, s izvorom. IZRADA "zaključka" ili "ukupne ocjene" između dokumenata; Samo dajte svakom dokumentu vlastitu izjavu kao činjenicu. Dokumentacija: [ovdje]

Slab upit / Jak upit

Slabo:

Pročitajte ove dokumente i sažeti što mi govore o temi, rezultatima i njihovoj važnosti.

Želja za "posljedicama" i "značenjem" tjera AI da odstupi od činjenica i izmisli tumačenja i veze; Ne spaja se ni na izvor.

Jako:

Navedite činjenice o [tema] u sljedećim dokumentima, povezujući svaki s referencom dokumenta. DODAJTE komentar, zaključak ili ocjenu važnosti. Navedite citate riječ po riječ. Ako tema nije spomenuta u dokumentu, napišite "nije spomenuta". Dokumentacija: [ovdje]

Razlika: vjernost činjenicama, povezivanje s izvorom, zabrana tumačenja i doslovno citiranje pretvaraju sažetak u pouzdanu kartu otkrića.

Uobičajene greške

  • Miješajući sažetak s dokazom. Sažetak vodi; Dokazi su preuzeti iz originalnog dokumenta.
  • Reći AI da "izvuče zaključke". Interpretacija te uzrok i posljedica posao su povjesničara; AI skenira slučajeve.
  • Uzimanje citata iz sažetka. AI pojednostavljuje/zamjenjuje citate; Svaki citat je doslovno preuzet iz dokumenta.
  • Uopće ne nadzire eliminaciju. Ako se oni označeni kao "nevažni" ne provjere u odnosu na uzorak, bit će propušteni važni dokumenti.
  • Ne tražeći praznine. Potrebno je ispitati što umjetna inteligencija izostavlja i što mijenja.

Ukratko

Skeniranje izvora i sažimanje jedno je od područja gdje umjetna inteligencija štedi najviše vremena u istraživanju povijesti: ona pretražuje stotine dokumenata, sažima ih i označava relevantne odlomke. Ali sažetak je karta otkrića, a ne dokaza. Povežite svaku ključnu točku natrag s izvornim dokumentom, uzmite doslovne citate iz dokumenta, nemojte dopustiti da AI proizvodi zaključke i tumačenja, kontrolirajte eliminaciju uzorkovanjem i preispitujte što je AI izostavio. AI vas vodi na pravu stranicu; Vaš je posao pročitati tu stranicu i shvatiti njen smisao.

Zadatak aplikacije

Prikupite najmanje 10 dokumenata koji se odnose na vašu temu i uz svaku priložite reference. Uklonite one koji se odnose na obrazac "skeniranja temeljenog na izvoru"; zatim sami provjerite neke od onih označenih kao "nebitno" kao uzorak. Neka "vjeran sažetak" sažme jedan od relevantnih rezultata i pronađite i potvrdite svaku ključnu točku u sažetku u dokumentu. Zabilježite koliko točaka AI dodaje ili iskrivljuje.

popis za provjeru

  • [ ] Počeo sam s jasnim istraživačkim pitanjem.
  • [ ] Svakom dijelu dokumentacije priložio sam referencu izvora.
  • [ ] Povezao sam svaku točku sažetka s izvornim dokumentom.
  • [ ] Uzeo sam citate doslovce iz dokumenta.
  • [ ] Provjerio sam eliminaciju uzorkovanjem i ispitao nedostatke.