Yunit 4 / 11

Pagpapatunay at Pagkumpirma ng Pinagmulan (Fact-Check): Mula sa Claim hanggang sa Ebidensya

Mga nadagdag:

  • Kakayahang paghiwalayin ang isang claim sa mga independiyenteng nabe-verify na bahagi at tukuyin at i-cross-check ang isang pangunahing pinagmulan para sa bawat isa
  • Kakayahang gumawa at maglapat ng visual at reverse image search, metadata at internal consistency testing checklist na may suporta sa artificial intelligence
  • Ang pag-unawa na ang artificial intelligence ay hindi maaaring hatulan sa katumpakan, na ang ebidensya ay nagmumula sa pangunahing pinagmulan, at ang proseso ng pagkumpirma ay dapat na malinaw na nakasulat.

Sa pamamahayag, walang pangungusap na totoo hangga't hindi ito "ipinapakitang totoo." Fact-checking—ang pagkilos ng pagsubok sa katotohanan ng isang claim, imahe, numero, o dokumento na may independiyenteng ebidensya—ay ang gulugod ng propesyon. Isang reporter sa daloy ng impormasyon na pinabilis ng social media; Kailangan niyang subukan sa loob ng ilang minuto kung ang isang larawan ay aktwal na kinunan sa na-claim na lokasyon, kung ang isang account ay totoo o hindi, at ang pinagmulan ng isang numero. Ang artificial intelligence (AI) ay isang organisasyon at ideation tool sa prosesong ito: binibilang nito ang mga hakbang sa pag-verify, hinahati-hati ang isang claim sa mga bahagi nito, hinuhusgahan kung aling mga tanong ang itatanong, inililista ang lahat ng claim sa isang text na kailangang suriin. Ngunit dito ang pinaka-kritikal na babala ay nagiging mas mahigpit: AI ay hindi isang mapagkukunan ng fact-checking; Hindi mo malalaman kung totoo ang isang claim sa pamamagitan ng "pagtatanong" sa AI. Pina-streamline ng AI ang proseso, hinahanap ng mamamahayag ang ebidensya mula sa pangunahing pinagmulan. Tanungin ang AI "totoo ba ito?" Ang magtanong ay mag-imbita ng guni-guni.

Hakbang-hakbang: pagkumpirma ng claim

Hakbang 1 — Hatiin ang claim sa mga bahagi nito. Ang pangungusap na "Ang institusyong iyon ay nagtanggal ng 500 katao noong nakaraang taon" ay talagang ilang mga pag-aangkin: aling institusyon, anong taon, ilang tao, ano ang pinagmulan. Mabilis itong ginagawa ng AI; Ang bawat bahagi ay hiwalay na na-verify.

Hakbang 2 — Tukuyin ang pangunahing pinagmulan. Para sa bawat bahagi, "nasaan ang pinaka-maaasahang ebidensya?" Itanong ang tanong: opisyal na rekord, orihinal na dokumento, unang-kamay na saksi, ulat ng auditor. Maaaring magmungkahi ang AI kung saan titingin; Ngunit mahanap mo ang ebidensya at buksan ito.

Hakbang 3 — Subukan ang larawan at lokasyon. Para sa isang larawan/video: petsa na unang nai-publish, kuha ng lokasyon, pagkakapare-pareho ng panahon/lilim, mga palatandaan sa background. Baliktarin ang paghahanap ng imahe — isang paraan ng paghahanap kung saan ang isang imahe ay dating lumitaw sa Internet — ay nagpapakita kung ang isang lumang imahe ay ipinakita bilang bago. Inililista ng AI ang mga pagsusuring ito; obserbasyon at paghahanap gumawa ng desisyon.

Hakbang 4 — Suriin ang pagkakakilanlan at kasaysayan ng mapagkukunan. Petsa ng pagbubukas, mga nakaraang post, pagkakapare-pareho ng isang social media account. Ipinapaalala sa atin ng AI kung ano ang hahanapin; Gawin mo ang pagpapatunay.

Hakbang 5 — Cross-confirmation. Ang kritikal na paghahabol ay na-verify ng hindi bababa sa dalawang independiyenteng mapagkukunan. Ang dalawang site na nagkokopya sa isa't isa ay hindi "dalawang mapagkukunan"; Ang kalayaan ay mahalaga.

Hakbang 6 — I-rate ang resulta at isulat nang malinaw. Magbigay ng malinaw na hatol at ang ebidensya na humahantong dito, tulad ng "totoo," "nakapanlilinlang," "bahagyang totoo," "hindi sapat na ebidensya." Dapat makita ng mambabasa kung paano mo ito ibe-verify.

Pansin: Tanungin ang AI "totoo ba ang claim na ito?" Ang pagtatanong ng " ay ang pinaka-mapanganib na pagkakamali sa pagkumpirma. Ang AI ay maaaring gumawa ng isang nakakumbinsi na "oo/hindi" o kahit isang gawa-gawang "pinagmulan." Gamitin ang AI bilang isang orkestra ng proseso; Ang pangunahing ebidensya ay nagbibigay ng hatol ng katotohanan.

content na binuo ng AI at nakabaligtad

Ang AI ay naging paksa din ng pag-verify: ang mga teksto, tunog at larawan ay maaari na ngayong gawing artipisyal (ang paksa ng susunod na yunit). Kaya nagtatanong ang fact-checker "maaaring ang nilalamang ito ay isang produkto ng AI?" Idinagdag niya ang tanong sa kanyang proseso. Ang mga tool sa pag-detect ng AI ay nagbibigay ng patnubay ngunit hindi ito tiyak na ebidensya; Ang tunay na pag-verify ay bumababa muli sa pinagmulan, metadata at konteksto.

tatlong mini case

Case 1 — Lumang larawan, bagong claim. Isang reporter ang nakatanggap ng larawan ng isang sunog na sinasabing "kinuha ngayon sa lungsod na iyon." Inutusan niya ang AI na gumawa ng mga hakbang sa pag-verify; Ang unang item ay "reverse image search". Ang paghahanap ay nagpakita na ang parehong larawan ay nai-publish 3 taon na ang nakakaraan sa ibang bansa. Ang visual ay hindi ginawa ito sa hangin; Ginawa itong fact-check ng reporter.

Case 2 — Bilis ng pag-parse ng claim. Sa isang panahon ng halalan, kinailangang suriin ng isang reporter ang 12 numerical na claim sa isang 1 minutong pag-uusap. Hinati ni YZ ang pag-uusap sa 12 magkahiwalay na claim at gumawa ng listahan ng "kung aling opisyal na pinagmulan ang dapat hanapin" para sa bawat isa. Ang reporter ay nagpunta sa 12 mga mapagkukunan; 4 ay nagpakita na may independiyenteng ebidensya na ang mga pag-aangkin ay nakaliligaw. Ang pagkakaroon ng AI na gawin ang pag-parse sa halip na gawin ito nang manu-mano na naka-save ng halos isang oras, ngunit binuksan ng reporter ang bawat piraso ng ebidensya.

Case 3 — Pinagmulan ng gawa-gawa. Upang i-verify ang isang claim, ang isang intern ay direktang nagtanong sa AI, "totoo ba ito, ano ang pinagmulan?" tanong niya. "Oo" ang sinabi ng AI at nagbigay ng pangalan at link ng ulat. Binuksan ng editor ang link: walang ganoong ulat. Ito ay naging isang kaso ng pagsasanay na nagpakita sa koponan kung bakit ang panuntunang "Huwag humingi ng katumpakan ng AI" ay ganap.

Mga nakopyang template

1) Paghiwalayin ang claim sa mga bahagi:

Kukumpirmahin ko ang sumusunod na pangungusap. Hatiin ito sa mga hiwalay na nabe-verify na claim. Para sa bawat paghahabol: (1) kung anong impormasyon ang ibe-verify, (2) anong uri ng pangunahing pinagmumulan ang magiging pinaka-maaasahan, (3) sa anong punto ito magiging mapanlinlang. Huwag mong sabihin sa sarili mo na TOTOO/MALI. Pangungusap: [dito]

2) Checklist ng pag-verify ng visual/video:

Sinasabi ng isang larawan na "kinuha sa ganito at ganoong lugar sa ganito at ganoong petsa." Ilista ang mga hakbang sa pag-verify na kailangan kong gawin upang subukan ang claim na ito: reverse image search, mga pahiwatig sa lokasyon (signage, wika, arkitektura), pagkakapare-pareho ng anino/hangin, petsa ng unang publikasyon. Isulat kung paano sundin ang bawat hakbang.Larawan kung ano ang alam ko tungkol sa: [recipe]

3) Pag-alis ng lahat ng claim mula sa text:

Ilista ang BAWAT makatotohanang pag-aangkin sa teksto sa ibaba na nangangailangan ng pagpapatibay (mga numero, petsa, pagpapatungkol, panipi, paghahambing). Magmungkahi ng "kung anong independiyenteng pinagmulan ang dapat ma-verify" para sa bawat isa. Hiwalay na interpretasyon at katotohanan. Baguhin ang text. Teksto: [dito]

4) Pagsubok sa kalayaan:

Nakakita ako ng 3 source para sa sumusunod na claim: [summarize sources]. Anong mga tanong ang dapat kong itanong upang suriin kung ang mga ito ay tunay na INDEPENDENT o duplicate/batay sa iisang orihinal na pinagmulan? mapagpasyang paggawa ng desisyon; lilitaw ang mga tanong sa pagkontrol.

Mahinang prompt / Malakas na prompt

Mahinang prompt: "Totoo ba ang claim na ito? Ibigay ang iyong source."

Resulta: Ang AI ay gumagawa ng isang nakakumbinsi na hatol at kadalasan ay gawa-gawang pinagmulan. Ang mamamahayag ay nahuhulog sa maling pagtitiwala.

Napakahusay na prompt: "Hatiin ang claim na ito sa mga bahaging independiyenteng nabe-verify. Para sa bawat bahagi, isulat kung aling PANGUNAHING uri ng pinagmulan ang dapat kong hanapin at, kung nakakapanlinlang, sa anong punto ito maaaring mangyari. HINDI mo hinuhusgahan ang claim; Ive-verify ko ito mula sa pinagmulan."

Pagkakaiba: Ang malakas na prompt ay binabawasan ang AI sa isang editor ng proseso, pinipigilan ito sa paggawa ng gawa-gawang "pinagmulan/paghuhusga", at pinapanatili ang responsibilidad ng ebidensya sa mamamahayag.

tsart ng paghahambing

Uri ng pag-claim

Kontribusyon ng AI

pangunahing ebidensya

bitag

numeric data

Nag-parse, nagrerekomenda ng mga mapagkukunan

Opisyal na tala/ulat

% ng bumubuo ng AI

Quote/attribution

Nahahati sa mga bahagi

Orihinal na tala/dokumento

kinuha sa labas ng konteksto

Larawan/video

checklist

Baliktarin ang paghahanap, metadata

Lumang visual-bagong claim

account sa social media

Naglilista kung ano ang hahanapin

Kasaysayan ng account, pagkakapare-pareho

Imitation/bot account

dokumento

Nagmarka ng mga kahina-hinalang lugar

Pinagmulan, metadata, lagda

Fake/fictional na dokumento

Mga karaniwang pagkakamali

  • Nagtatanong sa AI tungkol sa katumpakan. "Totoo ba ito?" Ang tanong ay gumagawa ng mga gawa-gawang paghatol at pinagmumulan; Ang AI ay hindi nagbibigay ng ebidensya.
  • Ang kopya ng mga mapagkukunan ay binibilang bilang "dalawang mapagkukunan." Ang mga site na naglilipat sa isa't isa ay hindi independyente; Nilalabag nito ang prinsipyo ng cross-confirmation.
  • Huwag hanapin ang larawan sa kabaligtaran. Ang pagpapakita ng lumang larawan bilang bago ang pinakakaraniwang disinformation.
  • Inaalis ang konteksto. Ang panlilinlang sa pamamagitan ng pagbibigay ng tumpak na quote sa maling konteksto ay isa ring fact-checking error.
  • Hindi pagiging transparent. Ang kumpirmasyon na hindi nagpapakita sa mambabasa kung paano ito nakumpirma ay hindi nagbibigay inspirasyon sa tiwala.

Rating at transparent na wika ng kumpirmasyon

Ang kumpirmasyon ay madalas na nangyayari sa kulay abong lugar sa pagitan ng "totoo" at "mali"; Ang isang mahusay na tagasuri ng katotohanan ay nagsasalin ng kulay abong ito sa mga malinaw na kategorya. Ang karaniwang sukat ay: Tama (claim na sinusuportahan ng pangunahing ebidensiya), Bahagyang totoo (bahaging totoo ngunit nawawala o baluktot), Mapanlinlang (lumilikha ng maling impresyon na may teknikal na tamang elemento), Mali (pinatunayan ng ebidensya), at Hindi sapat na ebidensya (hindi makumpirma o mapabulaanan). Ang huling kategorya ay kritikal: dahil lamang sa hindi mo maaaring pabulaanan ang isang claim ay hindi ito ginagawang totoo; Ang pagsasabi ng "hindi sapat ang ebidensya" ay tapat din na pagsusuri sa katotohanan at mas mabuti kaysa sa pagbebenta ng maling katiyakan sa mambabasa.

Bilang karagdagan sa rating, ang katotohanan na ang kumpirmasyon ng balita ay nagpapakita ng ebidensya na landas ay ang batayan ng pagtitiwala. Dapat makita ng mambabasa kung aling dokumento ang tinitingnan, kung aling pinagmulan ang nagsasalita, kung ano ang ibinubunyag ng reverse search; Hindi sapat na sabihing "kami ay nag-imbestiga at ito ay naging mali". Dito matutulungan ka ng AI na gawing isang grid ng ebidensya ang iyong proseso ng pagsusuri sa katotohanan: ang bawat claim, ang ebidensya kung saan ito nakabatay, at ang ibinigay na rating, lahat nang magkasama. Ang ganitong talahanayan ay parehong nagpapadali sa trabaho ng editor sa panloob na pag-edit at nagbibigay-daan sa mambabasa na magtiwala sa kumpirmasyon kapag nai-publish. Tandaan: ang layunin ng fact-checking ay hindi lamang upang mahuli ang kasinungalingan, ngunit upang gawing nakikita at masusubaybayan ang tumpak na impormasyon.

Sa buod

Ang pag-verify ay hinahati-hati ang claim sa mga bahagi nito, paghahanap ng pangunahing ebidensiya para sa bawat isa, pagsubok sa larawan at pinagmulan, pagsasagawa ng independiyenteng cross-checking, at malinaw na pagsulat ng resulta. Sa proseso, pini-parse ng AI ang claim, gumagawa ng mga checklist, nagmumungkahi kung saan titingin — ngunit hindi kailanman gumagawa ng mga paghatol sa katotohanan o gumagawa ng mga mapagkukunan. Pinakamahirap na panuntunan: Tanungin ang AI "totoo ba ito?" Hindi ito tinatanong; Ang ebidensya ay nagmumula sa pangunahing pinagmumulan, ang kamay ng mamamahayag.

Gawain ng aplikasyon

Pumili ng claim o larawan na kumakalat sa social media. Sundin ang "Hatiin ang claim sa mga bahagi" at (kung nakikita) na "Visual verification checklist" na mga prompt. Maghanap para sa bawat bahagi na kinukuha ng AI sa aktwal na pangunahing mapagkukunan; I-rate ang resulta bilang "totoo / mapanlinlang / bahagyang / hindi sapat na ebidensya" at isulat kung paano mo ito na-verify sa 5 item.

checklist

  • [ ] Hinahati ko ang claim sa mga independiyenteng bahagi at ibe-verify ang bawat isa nang hiwalay.
  • [ ] Hindi ko hinihiling sa AI na hatulan ang katotohanan; Nahanap ko ang katibayan mula sa pangunahing mapagkukunan.
  • [ ] Sinusubukan ko ang mga larawan na may reverse na paghahanap at mga pahiwatig sa lokasyon.
  • [ ] Kinukumpirma ko ang kritikal na claim na may hindi bababa sa dalawang tunay na independiyenteng mapagkukunan.
  • [ ] Ipinakikita ko nang malinaw sa mambabasa kung paano ako nagbe-verify.