Yunit 10 / 11

Pananaliksik at Pagpapatunay ng Katotohanan: Panganib ng Mga Pinagmulan, Mga Sipi, at Mga Ginawang Pinagmumulan

Mga nadagdag:

  • Kakayahang gumamit ng artificial intelligence bilang panimulang mapa sa proseso ng pananaliksik at ikonekta ang bawat katotohanan at quote sa pangunahing pinagmulan
  • Kakayahang kilalanin ang panganib ng mga gawa-gawang mapagkukunan, pekeng mga panipi at maling petsa (mga guni-guni) at maglapat ng sistematikong pag-verify
  • Kakayahang mag-edit ng mga tala sa pananaliksik, bibliograpiya at checklist ng katotohanan na may suporta sa artificial intelligence at mapanatili ang pagiging maaasahan ng artikulo

Ang hindi nakikitang gulugod ng mahusay na pagsulat ay pananaliksik. Isang petsa, isang estadistika, isang quote, isang natuklasang siyentipiko—ang mga ito ay nagtataglay ng kredibilidad ng teksto. Ang isang maling katotohanan ay maaaring sirain ang kredibilidad ng isang buong akda. Ang artificial intelligence (AI) ay tila kapaki-pakinabang sa proseso ng pananaliksik: nagbibigay ito ng agarang, tuluy-tuloy, tiwala na sagot sa bawat tanong. Ngunit dito nakasalalay ang pinaka-mapanganib na bitag ng may-akda: Ang AI ay maaaring gumawa ng mga mapagkukunan, quote, petsa, at mga natuklasan na hindi talaga umiiral, na parang totoo ang mga ito. Maaari nating ibuod ang yunit na ito sa isang pangungusap: Ang AI ay maaaring maging panimulang mapa para sa pagsasaliksik, ngunit hindi ito maaaring maging panghuling mapagkukunan.

Halucination: ang pinaka mapanlinlang na panganib

Ang Hallucination ay kapag ang AI ay nagpapakita ng hindi umiiral na impormasyon sa isang ligtas at matatas na wika. Ayon sa pananaliksik, ang pinaka-mapanganib na anyo nito ay:

Fabricated source: Maaaring gumawa ang AI ng isang libro, artikulo, o ulat na hindi talaga umiiral; Bukod dito, may makatotohanang pangalan ng may-akda, taon at impormasyon sa journal. "Yılmaz, A. (2019). Digital Literacy. Journal of Communication, 14(2)." — parang totoo, ngunit maaaring hindi.

Pekeng quote: Maaaring i-attribute ng AI ang isang quote sa isang totoong tao na hindi nila kailanman sinabi. Nagbibigay ng pangalan ng isang sikat na manunulat at isang pangungusap na hindi kailanman binigkas ng manunulat na iyon.

Maling petsa/numero: Maaaring magbigay ng maling petsa ng isang kaganapan, isang istatistika, isang porsyento; lahat ay may parehong tumpak na tono.

Nakakalito na katotohanan: Maaaring malito ang dalawang totoong katotohanan at makagawa ng maling kumbinasyon (tulad ng pag-uugnay sa pahayag ng isang tao sa isa pa).

Ano ang pagkakatulad ng mga panganib na ito: lahat sila ay mukhang tuluy-tuloy at nakakumbinsi. Ang katatasan ay hindi katumpakan. Ang tanging proteksyon ay ang sistematikong pag-verify na nagli-link sa pangunahing pinagmulan.

Babala: Tanungin ang AI "totoo ba ang pinagmulang ito?" Ang pagtatanong ay HINDI isang paraan ng pagpapatunay. Maaari ring kumpirmahin ng AI ang pinagmulang ginawa nito bilang "oo, ito ay totoo". Ginagawa ang pag-verify sa labas ng AI, sa pangunahing pinagmulan: pagbubukas ng journal, libro, database mismo at paghahanap nito.

Lehitimong papel sa pananaliksik ng AI

Sa kabila ng lahat ng mga caveat na ito, ang AI ay hindi walang halaga sa pananaliksik; limitado lamang ang tungkulin nito. Mga lehitimong gamit:

Panimulang mapa: Pagtukoy kung saan magsisimula sa isang paksa, anong mga subheading ang mayroon, at anong mga konsepto ang kailangang saliksikin. Ito ay mga listahan ng mga bagay na hahanapin, hindi mga sagot.

Paglilinaw ng konsepto: Unawain ang isang hindi pamilyar na termino (upang i-verify ito mula sa pinagmulan).

Pagbuo ng tanong: "Anong mga tanong ang dapat kong itanong tungkol dito, ano ang maaaring napalampas ko?" Ang AI ay mahusay sa pagturo ng mga punto ng pagkabulag.

Pag-edit: Pagbubuod, pagkakategorya, at pag-format ng bibliograpiya ng iyong mga nakolekta (na-verify) na tala.

Ang talahanayan sa ibaba ay nagbubuod kung ano ang AI at hindi maganda para sa pananaliksik:

Paghanap

Angkop ba ang AI?

tala

Introduction map sa paksa

Oo

Direksyon lang, hindi sagot

Pagbuo ng mga tanong na hahanapin

Oo

Nagpapakita ng mga punto ng pagkabulag

Magbigay ng source/citation

hindi

Maaari itong gawin; i-verify mula sa primary

I-export ang history/statistics

hindi

Maaaring mali ito; bumili mula sa pinagmulan

I-edit ang mga na-verify na tala

Oo

Kinokolekta mo, nag-oorganisa ang AI

Systematic na daloy ng pag-verify

Isang panuntunan para sa bawat katotohanan: pumunta sa pangunahing pinagmulan. Ang pangunahing mapagkukunan ay kung saan unang nai-publish ang impormasyon: orihinal na artikulo sa pananaliksik, opisyal na ahensya ng istatistika, sariling libro/panayam, orihinal na dokumento. Ang sinasabi ng AI (at maging ang mga pangalawang buod) ay isang "claim" hanggang ma-verify, hindi isang "fact".

Daloy ng pag-verify:

  1. Markahan: Habang nagsusulat ka, markahan ang bawat katotohanan, petsa, quote, at numero ng tag na [VERIFY].
  2. Maghanap ng pangunahing pinagmumulan: Buksan ang pinagmulan para sa bawat naka-tag na item; Meron ba, tumutugma ba ang nilalaman nito sa sinabi?
  3. Cross-check: I-verify ang mga kritikal na katotohanan mula sa hindi bababa sa dalawang independiyenteng mapagkakatiwalaang mapagkukunan.
  4. Panatilihin ang mga talaan: Tandaan ang pinagmulan ng bawat napatunayang katotohanan; Sa publikasyon, ang bibliograpiya ay nagmula sa talang ito.

Maaari mong gamitin ang AI sa bahagi ng pag-edit ng daloy na ito:

Konteksto: Nasa ibaba ang mga tala na aking nakolekta at NA-verify mula sa PANGUNAHING pinagmulan, kasama ang pinagmulan na nakasulat sa tabi ng bawat tala. Gawain: Pangkatin ang mga talang ito ayon sa tema at magmungkahi ng pamagat para sa bawat pangkat. HUWAG MAGDAGDAG ng anumang claim nang walang pinagmulan; Facts, date or quotes na hindi ko binigay ay FAKE. Markahan ang mga nawawalang bahagi bilang "wala ang pinagmulan dito".

Maaari mo ring gamitin ang AI bilang isang "skeptiko":

Gawain: Ilista ang LAHAT ng makatotohanang claim, petsa, numero, at quotation na kailangang ma-verify sa text sa ibaba. Para sa bawat isa, isulat ang "anong uri ng pangunahing mapagkukunan ang dapat ma-verify?" HUWAG mong sagutin ito sa iyong sarili; Ang listahan ng pag-verify lang ang lalabas.

Pangunahin, pangalawa at tertiary na pinagmulan

Ang pag-alam sa hierarchy ng pinagmulan sa pagpapatunay ay ginagawang malinaw ang iyong trabaho. Ang pangunahing mapagkukunan ay kung saan ang impormasyon ay ginawa mismo: ang orihinal na artikulo sa pananaliksik, ang opisyal na talahanayan ng istatistika, sariling libro, ang desisyon ng korte, ang orihinal na dokumento. Ang pangalawang mapagkukunan ay ang teksto na nagbibigay-kahulugan o naghahatid ng pangunahin: isang ulat ng balita, isang pagsusuri, isang artikulo sa encyclopedia. Ang mga tertiary source ay mga buod na nagtitipon ng mga pangalawang mapagkukunan. Ang output ng AI ay parang isang tertiary digest sa pinakamahusay; Kadalasan ito ay mas mahina kaysa doon, dahil hindi nito maipakita ang pinanggalingan nito at maaaring buuin ito. Panuntunan: kung mas kritikal ang isang katotohanan, mas pangunahing dapat kang pumunta. Maaaring sapat na ang pangalawang mapagkukunan para sa kapaligiran ng isang nobela; Ang isang pangunahing mapagkukunan ay kinakailangan para sa isang claim sa kalusugan, isang petsa, o isang pahayag na nauugnay sa isang tao. Gamitin ang AI sa layer na "saan ako titingin" sa ibaba ng pyramid na ito, hindi kailanman sa layer na "ito ang katotohanan" sa itaas.

Tip: Kapag naglalagay ng hindi na-verify na katotohanan sa iyong text, mag-iwan ng nakikitang [VERIFY] na tag sa tabi nito at huwag isumite ang text na may anumang mga pangungusap na naglalaman ng tag na ito. Ang mga label ay isang simple ngunit nagliligtas-buhay na ugali na ginagawang nakikita ang mga nakalimutang katotohanan, na nagsasabing "Titingnan ko sila mamaya."

tatlong mini case

Kaso 1 — Pekeng artikulo. Isinulat ng isang may-akda na ibinigay ni YZ ang "2020, Journal of Media Studies, Demir et al." direktang ilagay ang pinagmulan sa bibliograpiya. Nalaman ng isang mambabasa na walang ganoong artikulo. Kinailangan ng may-akda na muling i-verify ang buong bibliograpiya mula sa pangunahin, na nagresulta sa dalawa pang apokripal na mapagkukunan. Lesson: walang source na kasama sa article na hindi nakikita ng personal.

Kaso 2 — Tamang paggamit. Nagsimula ang isang mamamahayag ng isang kumplikadong paksa sa AI: pagkuha ng mga subheading at mga tanong na itatanong. Pagkatapos ay kinolekta niya ang bawat katotohanan mula sa opisyal na ahensya ng istatistika at mula sa isa-sa-isang panayam; Ginamit lang niya ang AI para i-edit ang mga tala na na-verify niya. Ang pagsulat ay lumabas nang mabilis at matatag; Wala ni isang gawa-gawang katotohanan ang naipasa.

Kaso 3 — Pekeng quote. Isang tagapagsalita ang nagsama sa kanyang pagtatanghal ng isang "nakaka-inspire" na quote na iniuugnay sa isang sikat na AI scientist. Ang pangako ay ginawa; may nakapansin sa audience at nasira ang kredibilidad ng speaker. Ang tamang paraan: ay i-verify ang quote mula sa sariling libro/speech.

Mahinang prompt / Malakas na prompt

Mahinang prompt:

Bigyan mo ako ng 5 akademikong mapagkukunan at isang quote sa paksang ito.

Iniimbitahan ng prompt na ito ang AI na gumawa ng mga mapagkukunan; Ang output ay mukhang makatotohanan ngunit malamang na hindi mabe-verify.

Napakahusay na prompt:

Ang iyong tungkulin: research direction assistant. Paksa: [paksa].Gawain: May 6 na SUB-HEADINGS na kailangan kong saliksikin sa paksang ito at 2 tanong na kailangan kong itanong sa bawat isa. Gayundin, idirekta ako sa "anong uri ng mga pangunahing mapagkukunan (opisyal na istatistika, peer-reviewed na mga journal, isa-sa-isang panayam) ang maaari kong hanapin?" Ipakita mo lang kung saan ako titingin.

Pagkakaiba: AI ang hinihiling para sa direksyon, hindi mga sagot; Ang pinto ng katha ay sarado, ang pagpapatunay ay nasa may-akda.

Mga karaniwang pagkakamali

  • Gamit ang mapagkukunang ibinigay ng AI nang hindi ito bini-verify. Ang gawa-gawang pinagmulan ay nagiging kasinungalingan na nai-publish kasama ng iyong lagda.
  • Ang pagtatanong sa AI "totoo ba ito" at pagtitiwala sa sagot nito. Maaari ring kumpirmahin ng AI ang sarili nitong imbensyon.
  • Hindi pag-verify ng mga panipi mula sa sariling pinagmulan. Ang mga pekeng quotes ay sumisira sa kredibilidad.
  • Ang pagiging nasiyahan sa isang solong pinagmulan. Ang mga kritikal na katotohanan ay nangangailangan ng cross-checking mula sa hindi bababa sa dalawang independiyenteng mapagkukunan.
  • Iniisip ang AI bilang ang "huling mapagkukunan" sa halip na ang "panimulang mapa". AI ay nagpapakita ng direksyon; Ang pangunahing mapagkukunan ay nagbibigay ng katotohanan.

Sa buod

Sa pananaliksik, ang AI ay isang mahusay na panimulang mapa at organizer: pagkuha ng mga subheading, pagbuo ng mga tanong, pagkolekta ng mga na-verify na tala. Ngunit ang trabaho ng pagbibigay ng mga mapagkukunan, quote, petsa at istatistika ay hindi kailanman mapagkakatiwalaan; dahil kaya niyang buuin ang lahat ng nakakumbinsi (hallucination). Ginintuang panuntunan: ikonekta ang bawat katotohanan sa pangunahing pinagmumulan, i-cross-check ang kritikal, huwag gumamit ng anumang mapagkukunang ibinigay ng AI nang hindi mo ito hinahanap. Sinasabi ng AI kung saan titingin; Ikaw ang magpapasya kung ano ang iyong mahahanap.

Gawain ng aplikasyon

Pumili ng paksa. Una, kumuha ng mga subheading at tanong mula sa AI na may template na "direksyon" (HINDI ang pinagmulan). Pagkatapos ay sadyang humingi ng source/quote sa AI at subukang i-verify ang source na iyon bilang pangunahin: umiiral ba talaga ito, tumutugma ba ang nilalaman nito sa sinabi? Tandaan ang iyong mga natuklasan (kung gaano karaming mga mapagkukunan ang na-verify, ilan ang hindi natagpuan). Panghuli, gumawa ng listahan ng pag-verify ng iyong sariling teksto gamit ang template na "skeptic".

checklist

  • [ ] Gumamit ba ako ng AI upang bumuo ng direksyon at mga tanong, hindi para sa mga mapagkukunan?
  • [ ] Minarkahan ko ba ng [VERIFY] ang bawat katotohanan, petsa, quote, at numero?
  • [ ] Personal ko bang nakita at na-verify ang bawat source sa pangunahing source?
  • [ ] Nasuri ko ba ang mga kritikal na katotohanan laban sa hindi bababa sa dalawang independiyenteng mapagkukunan?
  • [ ] Na-verify ko ba ang mga quote sa sariling pinagmulan ng indibidwal?
  • [ ] Tahasang ibinigay ko ba sa AI ang panuntunang "pinagmulan/katha ng pagsipi"?