Yunit 10 / 11

Source Verification, Hallucination at Attribution Discipline

Mga nadagdag:

  • Pag-alam kung bakit nakatago ang guni-guni sa domain ng tao at magagawang ipasa ang bawat pinagmulan sa pamamagitan ng limang-hakbang na chain ng pag-verify (existence, imprint, quote, context, attribution)
  • Kakayahang kumpirmahin ang pagiging tunay ng pinagmulan na may mga konkretong pagkakakilanlan tulad ng DOI, ISBN at catalogue.
  • Unawain ang disiplina ng pagbabawal sa artificial intelligence sa paggawa ng mga katha at hindi kailanman pag-delegate ng pag-verify ng quotation at attribution na katapatan dito.

Ang halaga ng isang teksto sa larangan ng tao at panlipunan ay nakasalalay sa pagiging tunay at tumpak na paglilipat ng mga pinagmumulan na pinagbatayan nito. Isang literary essay, isang thesis, isang lecture note—lahat ay umaasa sa mga mapagkakatiwalaang source at tapat na pagpapalagay (nagpapakita kung sino/saan ka nakakuha ng impormasyon o isang quote). Nag-aalok ang AI ng mahusay na kaginhawahan sa larangang ito, ngunit nagdadala din ito ng pinakamalaking panganib: guni-guni, iyon ay, paggawa ng hindi umiiral na pinagmulan, quote o katotohanan bilang totoo. Ang yunit na ito ay nakatuon sa pagtatatag ng "verification armor" laban sa panganib na ito.

Panuntunan ng isang pangungusap: Walang pinagmulan, quote, petsa o numero na binuo ng AI ang maaaring magpasok ng teksto nang walang kumpirmasyon ng unang tao mula sa pangunahin o maaasahang pinagmulan. Ang panuntunang ito ay ang pinakaulit at hindi gaanong nababaluktot na tuntunin ng modyul na ito.

Bakit napakadelikado ng hallucination sa larangang ito?

Kung mali ang AI sa isang teknikal na tanong, madalas itong mapapansin; ngunit sa larangan ng tao ang guni-guni ay mahusay na itinatago:

  • Makatotohanang byline: Pinagsasama ng AI ang pangalan ng isang tunay na may-akda na may pamagat na naaangkop sa field at isang makatwirang taon. Ang resulta ay isang pinagmulan na hindi umiiral ngunit mukhang eksaktong totoo.
  • Sipi na angkop sa istilo: Maaaring gayahin ng AI ang istilo ng isang may-akda at ipakita ang isang pangungusap na hindi sa kanya bilang "kanyang salita".
  • Malapit ngunit maling petsa: Ang taon ng isang trabaho ay maaaring ilipat ng isa o dalawang taon; Tinatakas nito ang pabaya na mambabasa.
  • Nalilitong pagpapatungkol: Maaaring mag-attribute ng ideya sa maling tao.

Ang lahat ng ito ay maaaring tahimik na makalusot sa teksto ng isang may-akda na may tapat na intensyon, at kung hindi mahuli, masisira ang reputasyon ng may-akda at ang tiwala ng mambabasa.

Pag-iingat: Dahil lamang na ang isang mapagkukunan ay lumilitaw na "makatotohanan" sa AI ay hindi nangangahulugan na ito ay totoo. Ang realismo at realidad ay dalawang magkaibang bagay; Ang AI ay isang master sa una, hindi nito magagarantiya ang huli.

Verification armor: hakbang-hakbang

Para sa bawat pinagmulan at quote, sundin ang chain na ito:

  1. meron ba Hanapin ang pinagmulan sa catalog ng library, isang maaasahang database, o sa site ng publisher. Kung hindi ito matagpuan, wala ito — huwag gamitin.
  2. Tama ba ang imprint? May-akda, pamagat, publisher/journal, taon, pahina — lahat ay dapat magkatugma nang eksakto.
  3. Totoo ba ang quote? Hanapin ang quote sa pinagmulan mismo, sa tinukoy na pahina, at ihambing ito sa verbatim.
  4. Tama ba ang konteksto? Ang quote ba ay literal na ginamit, o ito ay baluktot?
  5. Ang pagpapatungkol ba ay tapat? Ang ideya ba ay iniuugnay sa tamang tao, ang isang bagay ba ay kinuha mula sa isang pangalawang pinagmulan na inilalarawan bilang pangunahin?

Kung masira ang kahit isang link ng chain na ito, hindi ito makapasok sa source text.

Tip: Turuan ang AI mula sa simula: "Huwag magbigay ng anumang mapagkukunan na hindi mo siguradong umiiral; kung hindi ka sigurado, sabihin ang 'Hindi ko mahanap ang pinagmulan'." Hindi nito ganap na tinatapos ang guni-guni, ngunit hinihimok nito ang AI na sabihin ang "Hindi ko alam" sa halip na gumawa ng paraan.

Disiplina sa pagsipi at pagsipi

Kasama ng pag-verify, ang matapat na pagpapatungkol ay isa ring disiplina:

  • Ibigay ang direktang quote na may mga quote at pahina; Hayaan itong maging literal.
  • Iugnay din ang di-tuwirang sipi (pagbubuod sa sarili mong mga salita) sa pinagmulan; Kung hindi sa iyo ang ideya, kailangan nito ng attribution.
  • Malinaw na sabihin ang kontribusyon ng AI ayon sa panuntunan ng iyong organisasyon; Ang AI ay hindi isang "resource," ngunit kung gagamitin, dapat itong ideklara.
  • Huwag ilarawan ang pangalawang pinagmulan bilang pangunahin; Kung kumuha ka ng quote mula sa isang may-akda mula sa ibang libro, ipahiwatig ito.

tatlong mini case

Kaso 1 — Dalawa sa limang pinagmumulan ay naging kathang-isip lamang. Dumaan ang isang mananaliksik sa proseso ng pag-verify ng 5 source na ibinigay ng AI. 2 ang wala sa catalog, 1 ang nagkamali ng taon, 2 ang totoo at tama. Ang 2 na-verify lang ang ginamit; artikulong protektado mula sa kathang-isip na pagpapatungkol.

Kaso 2 — Nahuli ang pagbaluktot ng panipi. Isang estudyante ang nakahanap ng quote mula sa AI sa isang aktwal na libro, ngunit ang ibig sabihin ng quote ay eksaktong kabaligtaran sa orihinal na konteksto. Inalis ng AI ang pangungusap sa labas ng konteksto. Itinama ng mag-aaral ang sipi sa wastong konteksto nito.

Case 3 — Itinama ang maling attribution. Sa isang lecture note, nag-attribute ang AI ng opinyon sa maling may-akda. Nang i-cross-check ito ng guro sa dalawang mapagkakatiwalaang source, nahanap niya ang nararapat na may-ari at inayos ito. Ang tala ay nakaligtas nang hindi nagkakamali sa estudyante.

Apat na maaaring kopyahin na mga template

1) Pagtuturo sa pagbabawal sa paggawa:

Mula ngayon: HUWAG gumawa ng anumang pinagmulan, quote, petsa o numero na hindi mo siguradong umiiral. Kung hindi ka sigurado, sabihin ang "kailangan ng pag-verify" o "Hindi ko mahanap." Huwag kailanman magbigay ng tag na makatotohanan ngunit hindi mo magagarantiya ang pagiging tunay nito. Sundin ang panuntunang ito sa bawat tugon.

2) Roadmap ng pag-verify ng pinagmulan:

Ive-verify ko mismo ang source sa ibaba. Sabihin sa akin kung saan hahanapin ang mapagkukunang ito (catalog, database, publisher) at kung anong pangunahing impormasyon. Iyong kinukumpirma na ang mapagkukunan ay umiiral; ibigay lang ang mga hakbang sa pag-verify.Source: [paste credit]

3) Pagsusuri sa konteksto ng quote:

Nasa ibaba ang isang quote at ang aktwal na talata kung saan ito nangyayari. Ang quote ba ay ginamit sa orihinal nitong konteksto o ito ay baluktot? Umasa ka lang sa text na binigay ko sayo; pagdaragdag ng komento. Quote: [...] Orihinal na talata: [...]

4) Pag-audit ng integridad ng pagpapatungkol:

Sa aking teksto sa ibaba: aling mga pangungusap ang nangangailangan ng pinagmulan ngunit nananatiling hindi nauugnay, aling ideya ang maaaring pag-aari ng iba, mayroon bang lugar kung saan ipinapakita ko ang pangalawang pinagmulan bilang pangunahin? Pagmumungkahi ng mga gawa-gawang mapagkukunan; ituro lang ang mga nawawalang citation.Text: [paste text]

Mahinang prompt / Malakas na prompt

Mahina: "Magbigay ng 5 akademikong mapagkukunan at mga quote sa paksang ito."

Güçlü: "Sabihin sa akin kung anong uri ng mga mapagkukunan at mga keyword ang dapat kong hanapin habang nagsasaliksik tungkol sa paksang ito. Huwag gumawa ng anumang mga sanggunian o mga panipi na hindi mo siguradong umiiral; kung hindi ka sigurado, sabihin ang 'Hindi ko mahanap ito'. Ibibigay ko sa iyo ang mga mapagkukunang makikita ko sa ibang pagkakataon; Kukumpirmahin ko ang mga panipi mula sa mga aklat."

Ang malakas na prompt ay nagsasara ng pinto sa hallucination at nag-iiwan ng pag-verify sa tao. Ang mahinang prompt ay direktang nag-aanyaya sa haka-haka na produksyon ng mapagkukunan.

Talaan ng chain ng pagpapatunay

hakbang

Tanong

lokasyon ng pag-verify

nilalang

Umiiral ba talaga ang pinagmulan?

Catalog / database

imprint

Tama ba ang may-akda, taon, pahina?

Publisher/imprint

quote

Ito ba ay verbatim sa teksto?

ang pinagmulan mismo

Konteksto

Baluktot ba ang kahulugan?

pangunahing talata

Sipi

Sa tamang tao?

cross check

Pag-verify na may permanenteng link at imprint

May mga kongkretong paraan upang mabilis at mapagkakatiwalaang kumpirmahin kung ang isang mapagkukunan ay talagang umiiral. Karamihan sa mga modernong akademikong publikasyon ay may DOI (Digital Object Identifier—isang hindi nagbabagong natatanging ID na permanenteng itinalaga sa isang publikasyon; ito ay gumaganap bilang isang link at direktang humahantong sa publikasyon). Kung na-access mo ang aktwal na publikasyon kapag na-type mo ang DOI ng isang artikulo sa isang browser, umiiral ang pinagmulang iyon; Kung hindi mo ito mahanap o wala talaga ang DOI, maghinala. Ang mga "DOI" na binuo ng AI ay kadalasang gawa-gawa at wala saan; Ito ay isa sa mga pinaka-praktikal na pagsubok ng pagkuha ng haka-haka na pinagmulan.

Ang ISBN (International Standard Book Number) ay nagbibigay ng katulad na pagkakakilanlan para sa mga aklat; Maaari mong i-verify ang pagiging tunay ng aklat sa pamamagitan ng paghahanap nito sa pamamagitan ng ISBN sa isang catalog ng library o isang maaasahang database ng libro. Para sa mga peryodiko, tingnan ang pangalan ng journal at impormasyon ng dami/isyu sa opisyal na website ng publisher. Ang mga konkretong pagkakakilanlan na ito ang sagot sa tanong na "Totoo ba ang pinagmulan?" Malinaw nitong sinasagot ang iyong tanong sa loob ng ilang minuto.

Ginagawa ng mga paraang ito ang pag-verify sa isang "transaksyon" sa halip na isang "stock": kapag binuksan mo at tiningnan nang personal ang bawat source, sa catalog, ng DOI, o sa site ng publisher, ang panganib ng phantom attribution ay higit na naaalis.

Tip: Kapag natapos mo ang iyong bibliograpiya, gumawa ng "click tour": aktwal na buksan ang DOI o catalog record ng bawat source. Kahit na ang isang mapagkukunan na hindi nagbubukas ay isang babala; itama ito gamit ang tamang imprint o alisin ito sa listahan.

Mga karaniwang pagkakamali

  • Napagkakamalang realismo ang realidad. Ang makatotohanang pagkakakilanlan ng AI ay hindi nagpapatunay sa pagkakaroon nito.
  • Hindi bini-verify ang quote mula sa pinagmulan. Maaaring mag-leak ang mga gawa-gawa o distorted na quotes.
  • Pagkuha ng kasaysayan mula sa iisang pinagmulan. Cross-check gamit ang hindi bababa sa dalawang mapagkakatiwalaang mapagkukunan.
  • Gawing pangunahin ang pangalawang hitsura. Sabihin nang tapat ang transmission chain.
  • Binabanggit ang AI bilang pinagmulan. Ang AI ay hindi isang mapagkukunan; ang paggamit nito ay ipinahayag, ang sanggunian ay ginawa sa pangunahing pinagmulan.

Sa buod

Ang katapatan sa humanities ay nakasalalay sa katumpakan ng pinagmulan at pagsipi. Ang pinakamalaking panganib ng AI ay ang paggawa nito ng mga source at quote na mukhang makatotohanan ngunit wala. Ipasa ang bawat source at citation sa limang hakbang na verification chain (entity, credit, quote, context, attribution). Ipagbawal ang AI mula sa paggawa mula sa simula at huwag italaga ang pag-verify dito. Ang disiplinang ito ay ang garantiya ng iyong pagiging maaasahan sa propesyon na ito.

Gawain ng aplikasyon

Subukang magmungkahi ang AI ng ilang source at isang quote sa isang paksa. Patakbuhin ang bawat source sa pamamagitan ng verification chain: ilan ang aktwal na umiiral, ilan ang may tamang attribution, nasa source ba talaga ang quote? Isulat ang mga resulta sa isang talahanayan. Ang karanasang ito ay tiyak na magpapakita ng mga limitasyon ng AI sa larangang ito.

checklist

  • [ ] Kinumpirma ko ang pagkakaroon ng bawat mapagkukunan sa catalogue.
  • [ ] Na-verify ko na ang bawat quote verbatim mula sa orihinal na pinagmulan.
  • [ ] Nasuri ko na ang konteksto ng quote ay hindi nabaluktot.
  • [ ] Na-cross-check ko ang mga petsa na may hindi bababa sa dalawang pinagmulan.
  • [ ] Pinagbawalan ko ang AI mula sa paggawa at hindi ako nagtalaga ng pag-verify dito.