Vinster:
- Förmåga att påskynda upptäckten genom att skanna stora högar av dokument med artificiell intelligens, eliminera och sammanfatta det som är relevant
- Förstå att sammanfattningen är en upptäcktskarta, inte ett bevis, och kunna länka varje viktig punkt och citera tillbaka till originaldokumentet.
- Möjlighet att skanna fall och kontrollera eliminering med prover utan att ha artificiell intelligens ger resultat/kommentarer
En av de största flaskhalsarna inom historisk forskning är att hitta "det som fungerar" i en enorm hög med material. En forskare kan behöva skanna hundratals dokument, tidningsvolymer, register eller korrespondensfiler för en avhandling eller artikel. Denna resursgranskningsuppgift kräver traditionellt läsning sida för sida och kan ta veckor. AI öppnar upp för denna flaskhals genom att snabbt skanna och sammanfatta stora bitar av text och markera relevanta platser. Men även här är faran tydlig: AI-sammanfattningen ersätter inte källan; det är bara en karta som leder dig till den verkliga källan.
I den här enheten får du lära dig hur du skannar stort historiskt material med AI, producerar tillförlitliga sammanfattningar, hittar relevanta avsnitt och undviker synopsis farligaste fallgrop: "att lita på synopsis utan att gå till källan". Målet är att använda AI för snabbhet utan att offra precision; När de används väl kommer dessa två mål inte i konflikt, utan ger varandra näring.
Sammanfattning ersätter inte källan
Låt oss lägga upp den grundläggande principen från början: AI-briefen är ett upptäcktsverktyg, inte ett bevis. Om en historiker ska inkludera en händelse, ett citat eller en bit data i sin studie, måste han ta det från originaldokumentet, inte från AI:s sammanfattning. Sammanfattningen säger, "det finns något liknande detta i det här dokumentet, gå och titta på det"; Han säger inte "det här är exakt vad det står i dokumentet". Eftersom sammanfattningsprocessen komprimerar, väljer ut, ibland förvränger och ibland lägger till något som inte existerar alls.
Du kan använda AI i tre kraftfulla jobb vid skanning:
- Skanna och sålla: Markera snabbt bland hundratals dokument som är relevanta för ditt ämne.
- Sammanfattning: Beskriv konturerna, personerna och ämnena i ett långt dokument.
- Hitta en passage: Markera frågan "Var finns ställena som pratar om detta ämne" i dokumentet.
I alla tre är utgången en "omdirigering"; Beviset är hämtat från originalhandlingen.
En förbisedd fara här är gränsen för AI:s sammanhangsfönster - mängden text som modellen kan bearbeta på en gång. När du ger en mycket stor hög med dokument på en gång, kan AI:n "glömma" eller skumma igenom mittsektionerna; tenderar att betona vad som händer i början och slutet. Därför, istället för att passa in hundratals dokument i en enda begäran, ger uppdelning av dem i logiska grupper och skanna varje grupp för sig mer tillförlitliga resultat. Dessutom är provkontroll väsentligt för att skilja om ett dokument som AI "aldrig nämner" verkligen är irrelevant eller utelämnat.
Arbetsflöde: steg för steg
1. Förtydliga forskningsfrågan. En tydlig fråga snarare än en vag "sammanfatta detta för mig": "Var finns platserna i dessa 40 dokument som nämner tvisten om vattenrättigheter?"
2. Förbered ingredienserna. Redigera texterna som ska skannas (transkription eller OCR-utdata). Bifoga källans namn/referens till varje del så att sammanfattningen kan kopplas till källan.
3. Ge skannings-/sammanfattningsinstruktioner. Be AI:n att förlita sig enbart på texten du ger, länka varje påstående till källan (dokument/sida) och inte lägga till något som inte finns.
4. Länka sammanfattningen tillbaka till källan. Hitta och verifiera i originaldokumentet varje viktig punkt markerad av sammanfattningen. Ta citat ordagrant från dokumentet.
5. Fråga luckor och partiskhet. Vad kan AI ha missat? Markerade han bara det uppenbara? Valde han den som passar din fråga och döljer motsatsen?
Varning: När du genererar en sammanfattning kan AI:n lägga till en länk eller ett resultat som inte finns i ett dokument eftersom det "verkar logiskt". Speciellt "vilken slutsats kan dras av dessa dokument?" Frågor som dessa uppmanar AI att göra tolkningar och slutsatser. Håll den sammanfattande begäran saklig; håll kommentaren för dig själv.
Skanningsuppgifter med en tabell
Quest
Bidrag av AI
Risk
verifiering
Ta bort det relevanta dokumentet
hastighet
Hoppa över relevant
provkontroll
Dokumentsammanfattning
kontur
Varpa/lägg till
Jämför med källan
Att hitta en passage/citat
bokmärke
fel plats
hitta i dokument
Jämförande sammanfattning
mönstermarkering
passande länk
Bekräfta varje påstående
Citerar
utkast
ordbyte
ord mot ord
Sammanfattning: AI visar var den är; Det faktiska dokumentet berättar vad som hände.
tre minifodral
Mål 1 — 300 handlingar reducerade till 2 dagar. En forskare studerade en stads tvist om vattenrättigheter 1900-1920. Att skanna en serie på 300 dokument för hand skulle ta veckor. AI markerade varje dokument som "är det relaterat till vattenrättigheter"; 42 av 300 dokument visade sig vara relevanta. Forskaren läste bara dessa 42 på djupet. Men han kontrollerade också 20 av de 258 dokument som markerats som irrelevanta som ett prov; Hittade att 2 faktiskt var relaterade och fixade det. Lektion: eliminering påskyndar men måste kontrolleras av prov.
Fall 2 — Falskt resultat. En student bad YZ att sammanfatta 15 dokument och be om "slutsatsen från dessa dokument." AI skrev en orsak-verkan relation som inte fanns i dokumenten som "resultat" på ett flytande språk. När eleven gick igenom handlingarna såg han att en sådan slutsats inte hade stöd i något dokument. Lektion: låt inte AI producera tolkningen och slutsatsen; Gör en ärendescanning, du bestämmer resultatet.
Fall 3 — Modifierat citat. En författare skulle lägga in ett "citat" från AI-abstraktet i sin tidning. När han jämförde det med dokumentet märkte han att AI:n hade förenklat meningen och ändrat några ord. Citatet var inte längre exakt detsamma som det som stod i dokumentet. Lektion: varje citat är hämtat ordagrant från dokumentet, inte abstraktet.
Fyra kopierbara mallar
1) Källberoende skanning:
Nedan finns delar av dokumentet, var och en märkt med sin referens. Min forskningsfråga: [fråga]. För varje dokument, markera helt enkelt "relevant/irrelevant/osäkert" och ange i förekommande fall vilken mening/passage det är relevant för och dokumentreferensen. Lägger till kommentarer, drar slutsatser. Dokumentation: [här]
2) Trogen sammanfattning:
Sammanfatta dokumentet nedan. Regler: (1) Skriv bara det som står i texten, LÄGG INTE TILL slutsatser/kommentarer/slutsatser. (2) Länka varje viktig punkt till dess plats (stycke/sida) i dokumentet. (3) Om du behöver citera, skriv det ord för ord, ändra det inte. (4) Skriv "ospecificerad" information som inte finns i texten. Dokument: [här]
3) Passagesökare:
Hitta ALLA omnämnanden av detta ämne i texten nedan: [ämne]. För varje, ge ett kort citat (ordagrant) och dess plats. Lägga till platser som inte inkluderar ämnet. Markera matchen du är osäker på som [otydlig]. Text: [här]
4) Jämförande fall genomgång:
Nedan finns två/tre dokument. Ange VAD varje dokument säger om detta ämne [ämne], separat, med dess källa. PRODUCERA en "slutsats" eller "övergripande utvärdering" mellan dokument; Ge bara varje dokument ett eget uttalande som fakta. Dokumentation: [här]
Svag prompt / Stark prompt
Svag:
Läs dessa dokument och sammanfatta vad de säger till mig om ämnet, resultaten och deras betydelse.
Att vilja ha "konsekvenser" och "betydelse" driver AI att avvika från faktum och hitta på tolkningar och samband; Den ansluter inte heller till källan.
Stark:
Lista fakta om [ämne] i följande dokument, länka var och en till dokumentreferensen. LÄGG TILL en kommentar, slutsats eller viktklassificering. Ge citat ord för ord. Om ämnet inte nämns i ett dokument, skriv "ej nämnt". Dokumentation: [här]
Skillnaden: faktatrohet, länkning till källa, tolkningsförbud och ordagrant citat förvandlar sammanfattningen till en tillförlitlig upptäcktskarta.
Vanliga misstag
- Missförstå sammanfattningen som bevis. Sammanfattning leder; Beviset är hämtat från originalhandlingen.
- Att säga till AI att "dra slutsatser". Tolkning och orsak och verkan är historikerns uppgift; AI skannar fall.
- Tar citatet från abstraktet. AI förenklar/ersätter offerter; Varje citat är hämtat ordagrant från dokumentet.
- Övervakar inte eliminering alls. Om de markerade "irrelevanta" inte kontrolleras mot provet, kommer viktiga dokument att saknas.
- Att inte be om luckor. Det är nödvändigt att ifrågasätta vad AI utelämnar och vad det fördomar.
Sammanfattningsvis
Källskanning och sammanfattning är ett av de områden där AI sparar mest tid i historieforskning: den sållar igenom hundratals dokument, sammanfattar dem och markerar relevanta avsnitt. Men sammanfattningen är en karta över upptäckter, inte bevis. Länka varje nyckelpunkt tillbaka till originaldokumentet, ta citat ordagrant från dokumentet, låt inte AI producera slutsatser och tolkningar, kontrollera eliminering genom provtagning och ifrågasätta vad AI har utelämnat. AI tar dig till rätt sida; Det är ditt jobb att läsa den sidan och förstå den.
Applikationsuppgift
Samla in minst 10 stycken dokumentation relaterade till ditt ämne och bifoga referenser till var och en. Eliminera de som är relaterade till mönstret "källbaserad skanning"; kontrollera sedan några av de som är markerade som "irrelevanta" själv som ett exempel. Låt en "trogen sammanfattning" sammanfatta en av de relevanta resultaten och hitta och verifiera varje nyckelpunkt i sammanfattningen i dokumentet. Notera hur många poäng AI:n lägger till eller förvränger.
checklista
- [ ] Jag började med en tydlig forskningsfråga.
- [ ] Jag har bifogat en källhänvisning till varje dokumentation.
- [ ] Jag länkade tillbaka varje punkt i sammanfattningen till originaldokumentet.
- [ ] Jag tog citaten ordagrant från dokumentet.
- [ ] Jag granskade elimineringen genom stickprov och ifrågasatte luckorna.