Guadagni:
- Capacità di accelerare la scoperta scansionando grandi pile di documenti con l'intelligenza artificiale, eliminando e riassumendo ciò che è rilevante
- Comprendi che il riassunto è una mappa di scoperta, non una prova, ed essere in grado di collegare ogni punto importante e citare il documento originale.
- Capacità di scansionare i casi e verificare l'eliminazione con campioni senza che l'intelligenza artificiale produca risultati/commenti
Uno dei maggiori colli di bottiglia nella ricerca storica è trovare "ciò che funziona" in un'enorme pila di materiale. Un ricercatore potrebbe dover scansionare centinaia di documenti, volumi di giornali, registri o file di corrispondenza per una tesi o un articolo. Questa attività di revisione delle risorse richiede tradizionalmente la lettura pagina per pagina e può richiedere settimane. L’intelligenza artificiale risolve questo collo di bottiglia scansionando e riassumendo rapidamente grandi porzioni di testo e contrassegnando i punti rilevanti. Ma anche qui il pericolo è chiaro: il riepilogo AI non sostituisce la fonte; è semplicemente una mappa che ti indirizza alla vera fonte.
In questa unità imparerai come scansionare materiale storico di grandi dimensioni con l'intelligenza artificiale, produrre riassunti affidabili, trovare passaggi rilevanti ed evitare la trappola più pericolosa della sinossi: "fidarsi della sinossi senza andare alla fonte". L'obiettivo è utilizzare l'intelligenza artificiale per la velocità senza mai sacrificare la precisione; Se usati bene, questi due obiettivi non sono in conflitto, ma piuttosto si alimentano a vicenda.
Il riassunto non sostituisce la fonte
Esponiamo fin dall'inizio il principio di base: l'AI brief è uno strumento di scoperta, non una prova. Se uno storico intende includere un evento, una citazione o un dato nel suo studio, deve prenderlo dal documento originale, non dal riassunto dell'IA. Il riassunto dice: "c'è qualcosa del genere in questo documento, vai a vederlo"; Non dice "questo è esattamente quello che dice il documento". Perché il processo di sintesi comprime, seleziona, a volte distorce e a volte aggiunge qualcosa che non esiste affatto.
Puoi utilizzare l'intelligenza artificiale in tre potenti attività di scansione:
- Scansiona e vaglia: seleziona rapidamente tra centinaia di documenti pertinenti al tuo argomento.
- Riepilogare: delineare i contorni, le persone e gli argomenti di un lungo documento.
- Trovare un passaggio: contrassegnare la domanda "Dove sono i luoghi che parlano di questo argomento" nel documento.
In tutti e tre, l'output è un "reindirizzamento"; Le prove sono tratte dal documento originale.
Un pericolo trascurato qui è il limite della finestra di contesto dell'IA: la quantità di testo che il modello può elaborare contemporaneamente. Quando si consegna una pila molto grande di documenti in una sola volta, l'IA potrebbe "dimenticare" o sfogliare le sezioni centrali; tende a dare enfasi a ciò che accade all'inizio e alla fine. Pertanto, invece di inserire centinaia di documenti in un'unica richiesta, dividerli in gruppi logici ed eseguire la scansione di ciascun gruppo separatamente fornisce risultati più affidabili. Inoltre, il controllo a campione è essenziale per distinguere se un documento che AI “non menziona mai” è veramente irrilevante o omesso.
Flusso di lavoro: passo dopo passo
1. Chiarire la domanda di ricerca. Una domanda chiara piuttosto che un vago “riassumilo”: “Dove sono i luoghi in questi 40 documenti che menzionano la controversia sui diritti dell’acqua?”
2. Preparare gli ingredienti. Modifica i testi da scansionare (trascrizione o output OCR). Allega il nome/riferimento della fonte a ciascun pezzo in modo che il riassunto possa essere collegato alla fonte.
3. Fornire istruzioni di scansione/riepilogo. Chiedi all'IA di fare affidamento esclusivamente sul testo che fornisci, collegando ogni affermazione alla fonte (documento/pagina) e non aggiungendo nulla che non esiste.
4. Collega il riepilogo alla fonte. Trova e verifica nel documento originale ogni punto importante contrassegnato dal riepilogo. Prendi le citazioni letterali dal documento.
5. Lacune e pregiudizi nelle domande. Cosa potrebbe essersi perso l’intelligenza artificiale? Ha appena evidenziato l'ovvio? Ha scelto quello che si adatta alla tua domanda e ha nascosto il contrario?
Attenzione: quando si genera un riepilogo, l'IA potrebbe aggiungere un collegamento o un risultato che non è presente in un documento perché "sembra logico". Soprattutto "quale conclusione si può trarre da questi documenti?" Domande come queste invitano l’IA a fare interpretazioni e inferenze. Mantenere fattuale la richiesta riepilogativa; tieni il commento per te.
Scansione di attività con una tabella
Ricerca
Contributo dell'intelligenza artificiale
Rischio
verifica
Eliminare il documento pertinente
velocità
Salta pertinente
controllo del campione
Riepilogo del documento
contorno
Deforma/aggiungi
Confronta con la fonte
Trovare un passaggio/citazione
segnalibri
posizione sbagliata
trovare nel documento
Sintesi comparativa
marcatura del modello
collegamento di raccordo
Conferma ogni reclamo
Citando
bozza
sostituzione delle parole
parola per parola
Riepilogo: l'intelligenza artificiale mostra dove si trova; Il documento vero e proprio racconta cosa è successo.
tre mini custodie
Caso 1: 300 documenti ridotti a 2 giorni. Un ricercatore stava studiando la disputa sui diritti idrici di una città nel periodo 1900-1920. La scansione manuale di una serie di 300 documenti richiederebbe settimane. AI ha contrassegnato ciascun documento con la dicitura “è correlato ai diritti sull’acqua”; 42 documenti su 300 si sono rivelati rilevanti. Il ricercatore ha letto in modo approfondito solo questi 42. Ma ha anche controllato 20 dei 258 documenti contrassegnati come irrilevanti come campione; Ho scoperto che 2 erano effettivamente correlati e ho risolto il problema. Lezione: l'eliminazione accelera ma deve essere controllata dal campione.
Caso 2 – Risultato falso. Uno studente ha chiesto a YZ di riassumere 15 documenti e di chiedere "la conclusione di questi documenti". L'intelligenza artificiale ha scritto come "risultato" una relazione causa-effetto che non esisteva nei documenti, in un linguaggio fluente. Quando lo studente esaminò i documenti, vide che tale conclusione non era supportata in nessun documento. Lezione: non lasciare che sia l'intelligenza artificiale a produrre l'interpretazione e la conclusione; Ottieni una scansione del caso, decidi tu i risultati.
Caso 3 – Citazione modificata. Un autore inserirà una “citazione” dall’abstract sull’intelligenza artificiale nel suo articolo. Confrontandolo con il documento, ha notato che l’IA aveva semplificato la frase e cambiato alcune parole. La citazione non era più esattamente la stessa di quanto scritto nel documento. Lezione: ogni citazione è presa alla lettera dal documento, non dall'abstract.
Quattro modelli copiabili
1) Scansione dipendente dalla sorgente:
Di seguito sono riportate parti del documento, ciascuna etichettata con il suo riferimento. La mia domanda di ricerca: [domanda]. Per ciascun documento è sufficiente contrassegnare "rilevante/irrilevante/incerto" e, se pertinente, indicare per quale frase/passaggio è rilevante e il riferimento del documento. Aggiungere commenti, trarre conclusioni. Documentazione: [qui]
2) Riassunto fedele:
Riassumi il documento qui sotto. Regole: (1) Scrivi solo quello che c'è nel testo, NON AGGIUNGERE deduzioni/commenti/conclusioni. (2) Collega ogni punto importante alla sua posizione (paragrafo/pagina) nel documento. (3) Se hai bisogno di citare, dillo parola per parola, non cambiarlo. (4) Scrivi informazioni "non specificate" che non sono nel testo. Documento: [qui]
3) Trova passaggio:
Trova TUTTE le menzioni di questo argomento nel testo seguente: [argomento]. Per ciascuno, fornire una breve citazione (testuale) e la sua ubicazione. Aggiunta di luoghi che non includono l'argomento. Contrassegna la corrispondenza di cui non sei sicuro come [non chiara]. Testo: [qui]
4) Revisione comparativa dei casi:
Di seguito due/tre documenti. Elenca COSA dice ogni documento su questo argomento [argomento], separatamente, con la sua fonte. PRODURRE una "conclusione" o una "valutazione complessiva" tra i documenti; Basta dare a ciascun documento la propria affermazione come fatto. Documentazione: [qui]
Prompt debole / Prompt forte
Debole:
Leggi questi documenti e riassumi ciò che mi dicono sull'argomento, i risultati e la loro importanza.
Volere “conseguenze” e “significato” spinge l’intelligenza artificiale a deviare dal fatto e a inventare interpretazioni e connessioni; Non si collega nemmeno alla fonte.
Forte:
Elenca i fatti su [argomento] nei seguenti documenti, collegandoli ciascuno al riferimento del documento. AGGIUNGI un commento, una conclusione o una valutazione di importanza. Riporta le citazioni parola per parola. Se l'argomento non è menzionato in un documento, scrivi "non menzionato". Documentazione: [qui]
La differenza: fedeltà ai fatti, collegamento alla fonte, divieto di interpretazione e citazione letterale trasformano il riassunto in un'affidabile mappa di scoperta.
Errori comuni
- Confondendo il riassunto con una prova. Lead riassuntivi; Le prove sono tratte dal documento originale.
- Dire all'IA di "trarre conclusioni". L'interpretazione, la causa e l'effetto sono il lavoro dello storico; L'intelligenza artificiale analizza i casi.
- Prendendo la citazione dall'abstract. L'intelligenza artificiale semplifica/sostituisce le virgolette; Ogni citazione è presa parola per parola dal documento.
- Non supervisionare affatto l'eliminazione. Se quelli contrassegnati come "irrilevanti" non vengono confrontati con il campione, i documenti importanti andranno persi.
- Non chiedere lacune. È necessario chiedersi cosa omette l’intelligenza artificiale e cosa distorce.
In sintesi
La scansione e il riepilogo delle fonti è una delle aree in cui l’intelligenza artificiale fa risparmiare più tempo nella ricerca storica: vaglia centinaia di documenti, li riassume e contrassegna i passaggi rilevanti. Ma il riassunto è una mappa della scoperta, non una prova. Collega ogni punto chiave al documento originale, prendi citazioni letterali dal documento, non lasciare che l'IA produca conclusioni e interpretazioni, controlla l'eliminazione mediante campionamento e metti in discussione ciò che l'IA ha tralasciato. L'intelligenza artificiale ti porta alla pagina giusta; Il tuo compito è leggere quella pagina e dargli un senso.
Compito dell'applicazione
Raccogli almeno 10 documenti relativi al tuo argomento e allega riferimenti a ciascuno. Eliminare quelli relativi al modello "scansione basata sull'origine"; quindi controlla tu stesso alcuni di quelli contrassegnati come "irrilevanti" come esempio. Avere un "riepilogo fedele" che riassuma uno degli output rilevanti e trovare e verificare ogni punto chiave nel riepilogo del documento. Nota quanti punti l'IA aggiunge o distorce.
lista di controllo
- [ ] Ho iniziato con una domanda di ricerca chiara.
- [ ] Ho allegato un riferimento alla fonte a ciascun pezzo di documentazione.
- [ ] Ho collegato ogni punto del riassunto al documento originale.
- [ ] Ho preso le citazioni letterali dal documento.
- [ ] Ho verificato l'eliminazione mediante campionamento e ho messo in discussione le lacune.