Yunit 5 / 12

Source Scanning, Discovery at Summarization

Mga nadagdag:

  • Kakayahang mapabilis ang pagtuklas sa pamamagitan ng pag-scan ng malalaking tambak ng mga dokumento na may artipisyal na katalinuhan, pag-aalis at pagbubuod kung ano ang nauugnay
  • Unawain na ang buod ay isang mapa ng pagtuklas, hindi isang patunay, at magagawang iugnay ang bawat mahalagang punto at i-quote pabalik sa orihinal na dokumento.
  • Ang kakayahang mag-scan ng mga kaso at suriin ang pag-aalis gamit ang mga sample nang hindi nagkakaroon ng artificial intelligence ay naglalabas ng mga resulta/komento

Isa sa mga pinakamalaking bottleneck sa makasaysayang pananaliksik ay ang paghahanap ng "kung ano ang gumagana" sa isang malaking pile ng materyal. Maaaring kailanganin ng isang mananaliksik na mag-scan ng daan-daang mga dokumento, volume ng pahayagan, rehistro, o mga file ng sulat para sa isang thesis o artikulo. Tradisyonal na nangangailangan ng pagbabasa sa bawat pahina ang gawaing ito sa pagsusuri ng mapagkukunan at maaaring tumagal ng ilang linggo. Binubuksan ng AI ang bottleneck na ito sa pamamagitan ng mabilis na pag-scan at pagbubuod ng malalaking tipak ng text at pagmamarka ng mga kaugnay na lugar. Ngunit dito rin malinaw ang panganib: hindi pinapalitan ng buod ng AI ang pinagmulan; ito ay isang mapa lamang na nagdidirekta sa iyo sa tunay na pinagmulan.

Sa unit na ito, matututunan mo kung paano mag-scan ng malalaking makasaysayang materyal gamit ang AI, gumawa ng maaasahang mga buod, maghanap ng mga nauugnay na sipi, at maiwasan ang pinaka-mapanganib na patibong ng synopsis: "pagtitiwala sa buod nang hindi pinupuntahan ang pinagmulan". Ang layunin ay gamitin ang AI para sa bilis habang hindi kailanman isinasakripisyo ang katumpakan; Kapag ginamit nang maayos, ang dalawang layuning ito ay hindi magkasalungat, bagkus ay nagpapalusog sa isa't isa.

Hindi pinapalitan ng buod ang pinagmulan

Ilatag natin ang pangunahing prinsipyo mula sa simula: Ang AI brief ay isang tool sa pagtuklas, hindi isang patunay. Kung ang isang mananalaysay ay magsasama ng isang kaganapan, isang quote, o isang piraso ng data sa kanyang pag-aaral, kailangan niyang kunin ito mula sa orihinal na dokumento, hindi mula sa buod ng AI. Ang buod ay nagsasabing, "may ganito sa dokumentong ito, tingnan mo ito"; Hindi niya sinasabing "ito mismo ang nakalagay sa dokumento". Dahil ang proseso ng buod ay nagpi-compress, pumipili, kung minsan ay naninira at kung minsan ay nagdaragdag ng isang bagay na wala sa lahat.

Maaari mong gamitin ang AI sa tatlong makapangyarihang trabaho sa pag-scan:

  1. I-scan at salain: Mabilis na markahan ang daan-daang mga dokumento na may kaugnayan sa iyong paksa.
  2. Pagbubuod: Binabalangkas ang mga balangkas, tao, at paksa ng isang mahabang dokumento.
  3. Paghahanap ng sipi: Pagmarka ng tanong na "Nasaan ang mga lugar na pinag-uusapan ang paksang ito" sa dokumento.

Sa lahat ng tatlo, ang output ay isang "redirect"; Ang ebidensya ay kinuha mula sa orihinal na dokumento.

Ang isang hindi napapansing panganib dito ay ang limitasyon ng window ng konteksto ng AI — ang dami ng text na maaaring iproseso ng modelo sa isang pagkakataon. Kapag nagbigay ka ng napakalaking stack ng mga dokumento nang sabay-sabay, ang AI ay maaaring "makakalimutan" o mag-skim sa gitnang mga seksyon; ay may posibilidad na magbigay ng diin sa kung ano ang nangyayari sa simula at wakas. Samakatuwid, sa halip na mag-akma ng daan-daang mga dokumento sa isang kahilingan, ang paghahati sa mga ito sa mga lohikal na grupo at ang pag-scan sa bawat grupo nang hiwalay ay nagbibigay ng mas maaasahang mga resulta. Bukod pa rito, mahalaga ang sample checking upang matukoy kung ang isang dokumento na "hindi kailanman binanggit" ng AI ay tunay na walang kaugnayan o tinanggal.

Daloy ng Trabaho: hakbang-hakbang

1. Linawin ang tanong sa pananaliksik. Isang malinaw na tanong sa halip na isang malabo na "ibuod ito sa akin": "Nasaan ang mga lugar sa 40 dokumentong ito na nagbabanggit ng hindi pagkakaunawaan sa mga karapatan sa tubig?"

2. Ihanda ang mga sangkap. I-edit ang mga tekstong i-scan (transkripsyon o OCR output). Ilakip ang pangalan/sanggunian ng pinagmulan sa bawat piraso upang ang buod ay maiugnay sa pinagmulan.

3. Magbigay ng scan/summary instructions. Hilingin sa AI na umasa lamang sa tekstong ibibigay mo, na iniuugnay ang bawat claim sa pinagmulan (dokumento/pahina) at hindi nagdaragdag ng anumang bagay na wala.

4. I-link ang buod pabalik sa pinagmulan. Hanapin at i-verify sa orihinal na dokumento ang bawat mahalagang punto na minarkahan ng buod. Kumuha ng mga quote verbatim mula sa dokumento.

5. Tanong gaps at bias. Ano ang maaaring napalampas ng AI? Ni-highlight lang ba niya ang obvious? Pinili ba niya ang isa na nababagay sa iyong tanong at itinago ang kabaligtaran?

Babala: Kapag bumubuo ng isang buod, maaaring magdagdag ang AI ng isang link o resulta na wala sa isang dokumento dahil ito ay "parang lohikal". Lalo na "anong konklusyon ang maaaring makuha mula sa mga dokumentong ito?" Ang mga tanong na tulad nito ay nag-aanyaya sa AI na gumawa ng mga interpretasyon at hinuha. Panatilihing totoo ang kahilingan sa buod; panatilihin ang komento sa iyong sarili.

Pag-scan ng mga gawain gamit ang isang talahanayan

Paghanap

Kontribusyon ng AI

Panganib

pagpapatunay

Tanggalin ang nauugnay na dokumento

bilis

Laktawan ang kaugnay

kontrol ng sample

Buod ng dokumento

balangkas

Warp/dagdag

Ihambing sa pinagmulan

Paghahanap ng sipi/quote

pag-bookmark

maling lokasyon

hanapin sa dokumento

Pahambing na buod

pagmamarka ng pattern

angkop na link

Kumpirmahin ang bawat paghahabol

Sinipi

burador

pagpapalit ng salita

salita sa salita

Buod: Ipinapakita ng AI kung nasaan ito; Ang aktwal na dokumento ay nagsasabi kung ano ang nangyari.

tatlong mini case

Case 1 — 300 na dokumento ay binawasan ng 2 araw. Pinag-aaralan ng isang mananaliksik ang pagtatalo sa karapatan ng tubig ng isang bayan noong 1900-1920. Ang pag-scan ng serye ng 300 na dokumento sa pamamagitan ng kamay ay tatagal ng ilang linggo. Minarkahan ng AI ang bawat dokumento bilang "may kaugnayan ba ito sa mga karapatan sa tubig"; 42 sa 300 na dokumento ay naging may kaugnayan. Binasa lamang ng mananaliksik ang 42 na ito nang malalim. Ngunit sinuri din niya ang 20 sa 258 na mga dokumento na minarkahan bilang hindi nauugnay bilang isang sample; Natagpuan na ang 2 ay talagang nauugnay at naayos ito. Aralin: bumibilis ang pag-aalis ngunit dapat kontrolin ng sample.

Kaso 2 — Pekeng resulta. Hiniling ng isang mag-aaral kay YZ na mag-summarize ng 15 dokumento at hingin ang "konklusyon mula sa mga dokumentong ito." Sumulat ang AI ng isang sanhi-epekto na relasyon na hindi umiiral sa mga dokumento bilang "resulta" sa isang matatas na wika. Nang suriin ng estudyante ang mga dokumento, nakita niya na ang naturang konklusyon ay hindi suportado sa anumang dokumento. Aralin: huwag magkaroon ng AI na gumawa ng interpretasyon at konklusyon; Kumuha ng case scan, ikaw ang magpapasya sa mga resulta.

Kaso 3 — Binagong quote. Ang isang may-akda ay maglalagay ng isang "quote" mula sa AI abstrak sa kanyang papel. Nang ikumpara niya ito sa dokumento, napansin niya na pinasimple ng AI ang pangungusap at binago ang ilang salita. Ang quote ay hindi na eksaktong kapareho ng kung ano ang nakasulat sa dokumento. Aralin: bawat quote ay kinuha sa verbatim mula sa dokumento, hindi abstract.

Apat na maaaring kopyahin na mga template

1) Pag-scan na umaasa sa pinagmulan:

Nasa ibaba ang mga bahagi ng dokumento, bawat isa ay may label na may reference nito. Ang aking tanong sa pananaliksik: [tanong]. Para sa bawat dokumento, markahan lamang ang "kaugnay/hindi nauugnay/hindi tiyak" at, kung may kaugnayan, ipahiwatig kung aling pangungusap/sipi ito ay may kaugnayan at ang sanggunian ng dokumento. Pagdaragdag ng mga komento, pagguhit ng mga konklusyon. Dokumentasyon: [dito]

2) Tapat na buod:

Ibuod ang dokumento sa ibaba. Panuntunan: (1) Isulat lamang kung ano ang nasa teksto, HUWAG DAGDAG ng mga hinuha/komento/konklusyon. (2) Iugnay ang bawat mahalagang punto sa lugar nito (talata/pahina) sa dokumento. (3) Kung kailangan mong mag-quote, bigyan ito ng salita sa salita, huwag baguhin ito. (4) Sumulat ng "hindi natukoy" na impormasyon na wala sa teksto. Dokumento: [dito]

3) Tagahanap ng daanan:

Hanapin ang LAHAT ng pagbanggit ng paksang ito sa teksto sa ibaba: [paksa]. Para sa bawat isa, magbigay ng maikling quote (verbatim) at lokasyon nito. Pagdaragdag ng mga lugar na hindi kasama ang paksa. Markahan ang tugma na hindi ka sigurado bilang [unclear]. Teksto: [dito]

4) Comparative case review:

Nasa ibaba ang dalawa/tatlong dokumento. Ilista kung ANO ang sinasabi ng bawat dokumento sa paksang ito [paksa], nang hiwalay, kasama ang pinagmulan nito. PAGBUO ng "konklusyon" o "kabuuang pagsusuri" sa pagitan ng mga dokumento; Bigyan lamang ang bawat dokumento ng sarili nitong pahayag bilang katotohanan. Dokumentasyon: [dito]

Mahinang prompt / Malakas na prompt

mahina:

Basahin ang mga dokumentong ito at ibuod kung ano ang sinasabi nila sa akin tungkol sa paksa, mga resulta at kahalagahan ng mga ito.

Ang pagnanais ng "mga kahihinatnan" at "kabuluhan" ay nagtutulak sa AI na lumihis mula sa katotohanan at mag-imbento ng mga interpretasyon at koneksyon; Hindi rin ito kumonekta sa pinagmulan.

malakas:

Ilista ang mga katotohanan tungkol sa [paksa] sa mga sumusunod na dokumento, na iniuugnay ang bawat isa sa sanggunian ng dokumento. MAGDAGDAG ng komento, konklusyon, o rating ng kahalagahan. Magbigay ng mga panipi bawat salita. Kung ang paksa ay hindi binanggit sa isang dokumento, isulat ang "hindi nabanggit". Dokumentasyon: [dito]

Ang pagkakaiba: katapatan sa katotohanan, pag-uugnay sa pinagmulan, pagbabawal sa interpretasyon, at verbatim quotation ay nagbabago sa buod sa isang maaasahang mapa ng pagtuklas.

Mga karaniwang pagkakamali

  • Napagkakamalang ebidensya ang buod. Mga lead ng buod; Ang ebidensya ay kinuha mula sa orihinal na dokumento.
  • Pagsasabi sa AI na "gumuhit ng mga konklusyon". Ang interpretasyon at sanhi at bunga ay gawain ng mananalaysay; Ang AI ay nag-scan ng mga kaso.
  • Pagkuha ng quote mula sa abstract. Pinapasimple/pinapalitan ng AI ang mga quote; Ang bawat quote ay kinuha sa verbatim mula sa dokumento.
  • Hindi pinangangasiwaan ang pag-aalis. Kung ang mga minarkahang "hindi nauugnay" ay hindi susuriin laban sa sample, ang mga mahahalagang dokumento ay mapapalampas.
  • Hindi humihingi ng gaps. Kinakailangang tanungin kung ano ang inalis ng AI at kung ano ang pinapanigan nito.

Sa buod

Ang source scan at summarization ay isa sa mga lugar kung saan ang AI ay nakakatipid ng pinakamaraming oras sa history research: ito ay nagsasala sa daan-daang mga dokumento, nagbubuod sa mga ito at nagmamarka ng mga nauugnay na sipi. Ngunit ang buod ay isang mapa ng pagtuklas, hindi ebidensya. I-link ang bawat pangunahing punto pabalik sa orihinal na dokumento, kumuha ng mga panipi sa verbatim mula sa dokumento, walang AI na gumawa ng mga konklusyon at interpretasyon, kontrolin ang pag-aalis sa pamamagitan ng sampling, at tanungin kung ano ang iniwan ng AI. Dadalhin ka ng AI sa tamang pahina; Trabaho mo na basahin ang pahinang iyon at unawain ito.

Gawain ng aplikasyon

Mangolekta ng hindi bababa sa 10 piraso ng dokumentasyong nauugnay sa iyong paksa at maglakip ng mga sanggunian sa bawat isa. Tanggalin ang mga nauugnay sa pattern na "source based scan"; pagkatapos ay suriin ang ilan sa mga minarkahang "hindi nauugnay" sa iyong sarili bilang isang sample. Magkaroon ng "tapat na buod" na buod ng isa sa mga nauugnay na output at hanapin at i-verify ang bawat mahalagang punto sa buod sa dokumento. Pansinin kung gaano karaming mga puntos ang idinaragdag o binaluktot ng AI.

checklist

  • [ ] Nagsimula ako sa isang malinaw na tanong sa pananaliksik.
  • [ ] Nag-attach ako ng source reference sa bawat piraso ng dokumentasyon.
  • [ ] Iniugnay ko ang bawat punto ng buod pabalik sa orihinal na dokumento.
  • [ ] Kinuha ko ang mga quote verbatim mula sa dokumento.
  • [ ] In-audit ko ang elimination sa pamamagitan ng sampling at kinuwestiyon ang mga gaps.