Winst:
- Mogelijkheid om het ontdekken te versnellen door grote stapels documenten te scannen met kunstmatige intelligentie, waardoor wat relevant is wordt geëlimineerd en samengevat
- Begrijp dat de samenvatting een ontdekkingskaart is en geen bewijs, en wees in staat elk belangrijk punt te koppelen en terug te citeren naar het originele document.
- Mogelijkheid om gevallen te scannen en de eliminatie te controleren met monsters zonder dat kunstmatige intelligentie resultaten/opmerkingen produceert
Een van de grootste knelpunten bij historisch onderzoek is het vinden van ‘wat werkt’ in een enorme stapel materiaal. Voor een scriptie of artikel moet een onderzoeker mogelijk honderden documenten, krantendelen, registers of correspondentiebestanden scannen. Deze taak voor het beoordelen van bronnen vereist traditioneel het lezen van pagina voor pagina en kan weken duren. AI lost dit knelpunt op door grote stukken tekst snel te scannen en samen te vatten en relevante plaatsen te markeren. Maar ook hier is het gevaar duidelijk: de AI-samenvatting vervangt de bron niet; het is slechts een kaart die je naar de echte bron leidt.
In deze module leer je hoe je groot historisch materiaal kunt scannen met AI, betrouwbare samenvattingen kunt maken, relevante passages kunt vinden en de gevaarlijkste valkuil van synopsis kunt vermijden: "de synopsis vertrouwen zonder naar de bron te gaan". Het doel is om AI te gebruiken voor snelheid zonder concessies te doen aan de nauwkeurigheid; Als ze goed worden gebruikt, conflicteren deze twee doelen niet, maar voeden ze elkaar eerder.
De samenvatting vervangt de bron niet
Laten we het basisprincipe vanaf het begin uiteenzetten: de AI-briefing is een ontdekkingsinstrument, geen bewijs. Als een historicus een gebeurtenis, een citaat of een stukje data in zijn onderzoek wil opnemen, moet hij dat uit het originele document halen, en niet uit de samenvatting van de AI. De samenvatting zegt: "Er staat zoiets in dit document, kijk er eens naar"; Hij zegt niet: "Dit is precies wat er in het document staat". Omdat het samenvattingsproces iets comprimeert, selecteert, soms vervormt en soms iets toevoegt dat helemaal niet bestaat.
U kunt AI gebruiken in drie krachtige scantaken:
- Scannen en zeven: Markeer snel tussen honderden documenten die relevant zijn voor uw onderwerp.
- Samenvattend: de contouren, mensen en onderwerpen van een lang document schetsen.
- Een passage zoeken: Markeer de vraag "Waar zijn de plaatsen waar over dit onderwerp wordt gesproken" in het document.
Bij alle drie is de uitvoer een "omleiding"; Het bewijsmateriaal is afkomstig uit het originele document.
Een over het hoofd gezien gevaar is de limiet van het contextvenster van de AI: de hoeveelheid tekst die het model in één keer kan verwerken. Wanneer je een hele grote stapel documenten in één keer weggeeft, kan de AI de middensecties ‘vergeten’ of doorbladeren; heeft de neiging de nadruk te leggen op wat er aan het begin en het einde gebeurt. In plaats van honderden documenten in één verzoek te passen, levert het verdelen van deze documenten in logische groepen en het afzonderlijk scannen van elke groep betrouwbaardere resultaten op. Bovendien is steekproefcontrole essentieel om te onderscheiden of een document dat AI ‘nooit vermeldt’ werkelijk irrelevant is of wordt weggelaten.
Werkstroom: stap voor stap
1. Verduidelijk de onderzoeksvraag. Een duidelijke vraag in plaats van een vaag ‘samengevat dit voor mij’: ‘Waar zijn de plaatsen in deze 40 documenten waar het geschil over waterrechten wordt genoemd?’
2. Bereid de ingrediënten voor. Bewerk de te scannen teksten (transcriptie of OCR-uitvoer). Voeg bij ieder stuk de bronnaam/referentie toe, zodat de samenvatting aan de bron gekoppeld kan worden.
3. Geef scan-/samenvattingsinstructies. Vraag de AI om uitsluitend te vertrouwen op de tekst die je geeft, waarbij je elke claim koppelt aan de bron (document/pagina) en niets toevoegt dat niet bestaat.
4. Koppel de samenvatting terug aan de bron. Zoek en verifieer in het originele document elk belangrijk punt dat in de samenvatting wordt gemarkeerd. Neem citaten letterlijk over uit het document.
5. Vraaghiaten en vooringenomenheid. Wat zou AI gemist kunnen hebben? Heeft hij zojuist het voor de hand liggende benadrukt? Heeft hij degene gekozen die bij uw vraag past en heeft hij het tegenovergestelde verborgen?
Let op: Bij het genereren van een samenvatting kan de AI een link of resultaat toevoegen dat niet in een document staat omdat het “logisch lijkt”. Vooral "welke conclusie kan uit deze documenten worden getrokken?" Vragen als deze nodigen de AI uit om interpretaties en gevolgtrekkingen te maken. Houd het summiere verzoek feitelijk; hou de opmerking voor jezelf.
Taken scannen met een tabel
Zoektocht
Bijdrage van AI
Risico
verificatie
Verwijder het relevante document
snelheid
Relevant overslaan
monstercontrole
Documentoverzicht
overzicht
Verdraaien/toevoegen
Vergelijk met bron
Een passage/citaat zoeken
bladwijzers
verkeerde locatie
vinden in document
Vergelijkende samenvatting
patroonmarkering
passende koppeling
Bevestig elke claim
Citeren
ontwerp
woordvervanging
woord voor woord
Samenvatting: AI laat zien waar het is; Het eigenlijke document vertelt wat er is gebeurd.
drie minikoffers
Casus 1: 300 documenten teruggebracht tot 2 dagen. Een onderzoeker bestudeerde het geschil over de waterrechten van een stad tussen 1900 en 1920. Het met de hand scannen van een reeks van 300 documenten zou weken duren. AI markeerde elk document als “is het gerelateerd aan waterrechten”; 42 van de 300 documenten bleken relevant. De onderzoeker las alleen deze 42 diepgaand. Maar hij controleerde ook 20 van de 258 documenten die als irrelevant waren gemarkeerd als voorbeeld; Ik ontdekte dat er 2 daadwerkelijk verband hielden en repareerde het. Les: de eliminatie versnelt, maar moet per monster worden gecontroleerd.
Geval 2 — Vals resultaat. Een student vroeg YZ om vijftien documenten samen te vatten en om "de conclusie uit deze documenten" te vragen. AI schreef een oorzaak-gevolgrelatie die niet in de documenten voorkwam als ‘resultaat’ in vloeiende taal. Toen de student de documenten doornam, zag hij dat een dergelijke conclusie in geen enkel document werd ondersteund. Les: laat de AI niet de interpretatie en conclusie produceren; Laat een casescan uitvoeren, jij bepaalt de uitslag.
Geval 3 — Gewijzigde offerte. Een auteur zou een ‘citaat’ uit het AI-samenvatting in zijn artikel plaatsen. Toen hij het met het document vergeleek, merkte hij dat de AI de zin had vereenvoudigd en een paar woorden had veranderd. Het citaat was niet meer precies hetzelfde als wat er in het document stond. Les: elk citaat is woordelijk overgenomen uit het document, niet uit de samenvatting.
Vier kopieerbare sjablonen
1) Bronafhankelijk scannen:
Hieronder staan delen van het document, elk gelabeld met de referentie. Mijn onderzoeksvraag: [vraag]. Voor elk document markeert u simpelweg "relevant/irrelevant/onzeker" en geeft u, indien relevant, aan voor welke zin/passage het relevant is en wat de documentreferentie is. Commentaar toevoegen, conclusies trekken. Documentatie: [hier]
2) Getrouwe samenvatting:
Vat het onderstaande document samen. Regels: (1) Schrijf alleen wat er in de tekst staat, VOEG GEEN gevolgtrekkingen/opmerkingen/conclusies toe. (2) Koppel elk belangrijk punt aan zijn plaats (paragraaf/pagina) in het document. (3) Als u wilt citeren, geef het woord voor woord, verander het niet. (4) Schrijf "niet-gespecificeerde" informatie die niet in de tekst staat. Document: [hier]
3) Doorgangzoeker:
Vind ALLE vermeldingen van dit onderwerp in de onderstaande tekst: [onderwerp]. Geef voor elk een kort citaat (letterlijk) en de locatie ervan. Plaatsen toevoegen die het onderwerp niet bevatten. Markeer de overeenkomst waarvan u niet zeker bent als [onduidelijk]. Tekst: [hier]
4) Vergelijkende casusbeoordeling:
Hieronder staan twee/drie documenten. Vermeld WAT elk document afzonderlijk over dit onderwerp [onderwerp] zegt, met de bron ervan. HET PRODUCEREN van een "conclusie" of "algemene evaluatie" tussen documenten; Geef elk document gewoon zijn eigen verklaring als feit. Documentatie: [hier]
Zwakke prompt/sterke prompt
Zwak:
Lees deze documenten en vat samen wat ze mij zeggen over het onderwerp, de resultaten en hun belang.
Het willen van ‘gevolgen’ en ‘belang’ dwingt AI ertoe af te wijken van de feiten en interpretaties en verbanden te bedenken; Het maakt ook geen verbinding met de bron.
Sterk:
Noem de feiten over [onderwerp] in de volgende documenten, waarbij u elk document koppelt aan de documentreferentie. VOEG een opmerking, conclusie of belangrijkheidsbeoordeling toe. Geef citaten woord voor woord. Als het onderwerp niet in een document wordt vermeld, schrijf dan 'niet vermeld'. Documentatie: [hier]
Het verschil: trouw aan feiten, linken naar de bron, verbod op interpretatie en woordelijk citeren transformeren de samenvatting in een betrouwbare ontdekkingskaart.
Veel voorkomende fouten
- De samenvatting voor bewijs aanzien. Samenvatting leads; Het bewijsmateriaal is afkomstig uit het originele document.
- AI vertellen dat hij ‘conclusies moet trekken’. Interpretatie en oorzaak en gevolg zijn de taak van de historicus; AI scant gevallen.
- Neem het citaat uit de samenvatting. AI vereenvoudigt/vervangt offertes; Elk citaat is letterlijk overgenomen uit het document.
- Er wordt helemaal geen toezicht gehouden op de eliminatie. Als de documenten die als "irrelevant" zijn gemarkeerd niet aan de hand van het monster worden gecontroleerd, worden belangrijke documenten gemist.
- Vraag niet om gaten. Het is noodzakelijk om de vraag te stellen wat AI weglaat en wat het vertekent.
Samengevat
Het scannen en samenvatten van bronnen is een van de gebieden waarop AI de meeste tijd bespaart in historisch onderzoek: het doorzoekt honderden documenten, vat ze samen en markeert relevante passages. Maar de samenvatting is een ontdekkingskaart, geen bewijs. Koppel elk kernpunt terug aan het originele document, neem woordelijke citaten uit het document, laat de AI geen conclusies en interpretaties produceren, controleer de eliminatie door middel van steekproeven en vraag je af wat de AI heeft weggelaten. AI brengt je naar de juiste pagina; Het is jouw taak om die pagina te lezen en er betekenis aan te geven.
Applicatie taak
Verzamel ten minste tien stukken documentatie die verband houden met uw onderwerp en voeg referenties toe aan elk stuk. Elimineer degenen die verband houden met het "brongebaseerde scan" -patroon; Controleer vervolgens zelf een aantal van de zaken die als "irrelevant" zijn gemarkeerd als voorbeeld. Laat een “getrouwe samenvatting” een van de relevante uitkomsten samenvatten en zoek en verifieer elk belangrijk punt in de samenvatting in het document. Let op hoeveel punten de AI toevoegt of vervormt.
controlelijst
- [ ] Ik begon met een duidelijke onderzoeksvraag.
- [ ] Ik heb bij elk stuk documentatie een bronverwijzing toegevoegd.
- [ ] Ik heb elk punt van de samenvatting teruggekoppeld naar het originele document.
- [ ] Ik heb de citaten letterlijk uit het document overgenomen.
- [ ] Ik controleerde de eliminatie door middel van steekproeven en stelde de hiaten in vraag.