Enota 9 / 11

Ocenjevanje izvirnosti, plagiatorstva in besedil, napisanih z AI

Dobički:

  • Sposobnost ohranjanja izvirnosti ne s tehnologijo zajemanja, temveč s kulturo poštenosti in vrednotenjem, ki temelji na procesu
  • Sposobnost izogibanja nepoštenim obtožbam z vedenjem, da so detektorji AI nezanesljivi in sami po sebi ne morejo biti dokaz
  • Sposobnost izvajanja preglednega razkritja uporabe AI in jasne politike uporabe

Zmožnost umetne inteligence, da ustvari besedilo, se dotika najbolj krhke točke književnega in jezikovnega izobraževanja: izvirnosti. Za učitelja "je učenec res napisal to besedilo?", za urednika "je ta vsebina izvirna ali proizvedena?", za raziskovalca "je to moja misel ali stavek stroja?" vprašanja so zdaj na vsaki mizi. V tej enoti bomo razpravljali o izvirnosti, plagiatorstvu (predstavljanje tujega dela ali ideje kot lastnega dela brez navedbe vira) in vrednotenju besedil, napisanih z AI.

Že na začetku jasno opozorilo: Ni zanesljivega orodja, ki bi lahko "zagotovo" zaznalo, ali je napisano v AI; Tako imenovani detektorji umetne inteligence so napačni in lahko inkriminirajo nedolžna besedila. Zato rešitev ne temelji na "tehnologiji zajemanja", temveč na kulturi integritete, vrednotenju, ki temelji na procesu, in jasnih pravilih.

Kaj je izvirnost in kaj ne?

Izvirnost pomeni, da besedilo resnično izraža lastno misel in izraz. To ne pomeni, da "umetna inteligenca ni bila uporabljena". Pisec lahko zaprosi umetno inteligenco za vnos, da popravi črkovanje, dobi povratne informacije in besedilo je lahko še vedno izvirno in pošteno — dokler je prispevek pregleden in izvirna misel in glas ostaneta osebna.

Kjer je izvirnost okrnjena, je tole: umetna inteligenca je ustvarila idejo, strukturo in stavke besedila, oseba pa je to predstavila kot svoje izvirno delo, pri čemer je prispevek skrila. Glavno vprašanje pri tem ni tehnologija, ampak poštenost: jasno povedati, kaj se dela.

Namig: "Ste uporabljali AI?" Vprašanje je napačno vprašanje. Pravo vprašanje: "Kje in kako ste uporabili AI in ali je misel vaša?" Vzpostavite kulturo odprtega razkritja glede uporabe umetne inteligence v vaši organizaciji; Transparentnost namesto prepovedi je bolj realna in poučna.

Zakaj detektorjem AI ne gre zaupati?

Tako imenovana orodja za odkrivanje umetne inteligence na podlagi statističnih namigov predvidijo, ali je besedilo "stroju podobno". Ampak:

  • Dajo lažno pozitivne rezultate: gladko in tekoče besedilo, ki ga je dejansko napisal človek, lahko označijo kot "AI". To pomeni lažno obtožbo nedolžnega študenta.
  • Z lahkoto jih je zaobiti: z manjšimi spremembami lahko besedilo prestane detektor.
  • Kaznujejo tiste, ki pišejo drugače od svojega maternega jezika: tisti, ki pišejo na preproste, formulacijske načine, se lahko po krivici obravnavajo kot sumljivi.

Zato izhod detektorja ni dokaz in sam po sebi ne more biti podlaga za obtožbo, opombo ali sankcijo.

Pozor: Samo zato, ker detektor pravi, da je "to besedilo 90 % AI", ni dovolj, da bi krivili študenta. Tak rezultat je v najboljšem primeru "začetek pogovora"; dejanska ocena mora temeljiti na dokazih o procesu (osnutki, študentova sposobnost razlage besedila).

Procesno ocenjevanje

Najzanesljivejši način za ohranitev pristnosti je ocenjevanje postopka, ne izdelka:

  1. Prosite za osnutek. Opombe, vmesne različice, popravki so sledi izvirnega postopka.
  2. Prosite za besedno razlago. Oseba, ki je dejansko napisala besedilo, lahko pojasni svojo izbiro: "Zakaj ste izbrali ta konec?"
  3. Uporabite pisanje v razredu/opazovano. Če del postopka izvajamo pod opazovanjem, je težko ponoviti izdelek.
  4. Prosite za osebno povezavo. Naloge, ki so odvisne od študentove lastne izkušnje, od določenega besedila, ki ga je prebral, naredijo splošno AI produkcijo neuporabno.

trije mini kovčki

1. primer — Detektor bi povzročil nepošteno obtožbo. Učitelj je dvomil o nalogi, kjer je detektor rekel "88% AI". Preden je obtožil študenta, je prosil za njegove osnutke in ustno razlago; Študent je podrobno zagovarjal besedilo in imel ročno napisane zapiske. Besedilo je bilo izvirno; Bilo bi nepošteno, če bi detektorju zaupali.

Primer 2 – Sprejeta pregledna uporaba. En študent je v svojem eseju izjavil: "Umetna inteligenca mi je postavila vprašanja za osnutek ideje, popravil sem črkovanje, vendar sem napisal besedilo in idejo," in dodal opombe postopka. Učitelj je menil, da je to pošteno in pristno; To ni bila kazen, ampak primer dobre prakse.

Primer 3 – Ulovljena je bila skrita proizvodnja. Študent je besedilo, ki ga je v celoti napisal, predložil AI kot svoje delo. V besedni razlagi ni znal pojasniti dela besedila ali pomena besede, ki jo je izbral. Težava ni bil detektor, ampak dijakova nevajenost lastnega besedila; Vrednotenje postopka je razjasnilo situacijo.

Štiri predloge za kopiranje

1) Pregledna izjava o uporabi AI (za študente):

V tej študiji sem uporabil umetno inteligenco v naslednjih fazah: - Ideja/vprašanje: [da/ne, kako] - Načrt/skelet: [da/ne] - Pisanje: [ali sem napisal besedilo] - Urejanje (črkovanje/tok): [da/ne] Stopnje, ki jih nisem uporabil: [...] Misel in izraz tega besedila pripadata meni.

2) Samokontrola izvirnosti:

Preberi moje besedilo spodaj in mi zastavi (odgovori) naslednja vprašanja: Ali lahko razložim vsako glavno idejo s svojimi besedami, ali sem našel vsak vir, ali imam za vsakim stavkom svojo misel? Poudarite šibke povezave. Besedilo: [prilepite besedilo]

3) Oblikovanje naloge na podlagi procesa (za učitelja):

Vaša vloga: oblikovalec ocenjevanja. Oblikujte procesno in osebno prilagodljivo pisno nalogo, ki AI oteži popolno tiskanje za naslednji rezultat: [dosežek]. dolžnost; Vključuje oris, ustni zagovor in osebno izkušnjo.

4) Nadzor poštenega ocenjevanja:

Dvomim v izvirnost besedila. Dajte mi kontrolni seznam za pošteno nadaljevanje, BREZ OBTOŽEVANJA UČENCA: kakšne dokaze o procesu naj zahtevam, katera vprašanja naj postavim? Izhoda detektorja ne obravnavajte kot dokaz.

Šibek poziv/močan poziv

Slab: "Povej mi, če je to besedilo napisal AI."

Strong: "Vem, da ne morete sami določiti izvirnosti tega besedila. Namesto tega naštejte, katere dokaze postopka (oris, opombe) bi zahteval in katera vsebinska vprašanja bi lahko postavil, da bi nekdo, ki je napisal besedilo, lahko odgovoril, da bi imel pošten pogovor s študentom. Ne delajte obremenjujočih sodb."

Zmogljiv poziv umetni inteligenci ne nalaga opravila "zaznavanja", ki ga ne more opraviti; uporablja pri oblikovanju pravičnega postopka. Slab poziv vabi k nezanesljivi presoji.

Pristopna tabela

vprašanje

nezanesljiva cesta

trdna cesta

Je to besedilo izvirno?

AI detektor

Postopek + besedna razlaga

Ali je bil uporabljen AI?

poskuša ujeti

Zahtevajte pregledno izjavo

Ali naj ocenim?

Odstotek detektorja

Pridobitev + dokazilo o postopku

Ali je obtožba potrebna?

Ne zanašajte se na en sam rezultat

Intervju, dokazi, pravica

Vzpostavite jasno politiko uporabe AI

Negotovost je izziv tako za učenca kot za učitelja. "Zanima me, ali je bilo to na dopustu?" Čeprav omahovanje poštenega študenta neupravičeno skrbi, zasenči tudi zlorabo. Rešitev je vnaprejšnja in jasno izražena politika uporabe: z jasnimi pravili določa, kje je umetna inteligenca v nalogi dovoljena, kje omejena in kje prepovedana. Dobra politika je opredeljena po stopnjah, ne pa v skrajnostih, kot sta »vse je prepovedano« ali »vse je dovoljeno«.

Na primer, v esejski nalogi je pravilnik lahko: da AI postavlja vprašanja na stopnji ideje, je brezplačno in deklarirano; Popravek črkovanja in ločil je brezplačen; Prepovedano je, da bi AI napisal besedilo sam; Vsak študent doda kratko izjavo o uporabi. Takšen okvir hkrati zagotavlja, da študent ve, kaj zmore, in omogoča pošteno ocenjevanje. Deljenje pravilnika na začetku lekcije prepreči poznejše razprave »tega nisem vedel«.

Enako načelo velja za akademska in uredniška okolja: revije, založbe in ustanove vse pogosteje zahtevajo izjave o uporabi umetne inteligence. Postavite te izjave ne kot priznanje krivde, temveč kot pošteno in običajno prakso preglednosti.

Nasvet: Ustvarite pravilnik tako, da se o njem pogovorite s študenti. Učenec, ki razume utemeljitev pravila (učenje in poštenost), ga je veliko bolj pripravljen upoštevati. Pravilo, ki se deli in ne vsiljuje, je močnejše.

Pogoste napake

  • Upoštevanje izhoda detektorja kot dokaz. Lažni pozitivni rezultati inkriminirajo nedolžne ljudi.
  • Ubijanje preglednosti z besedami "AI je prepovedana". Kultura izjav je bolj realna in poučna.
  • Ocenjevanje izdelka in ignoriranje postopka. Postopek je pravi dokaz izvirnosti.
  • Normalizacija prikrivanja prispevkov. Iskrenost je pomembna, ne glede na to, ali se uporablja ali ne.
  • Obtožba pred pogovorom. Najprej dokazi in pošten postopek.

Če povzamem

Avtentičnost ni zaščitena s tehnologijo zajemanja, temveč s kulturo integritete in vrednotenjem, ki temelji na procesu. Detektorji AI so nezanesljivi in ​​ne morejo biti samo dokaz. Spodbujajte pregledno razkritje namesto prepovedi uporabe umetne inteligence; Ocenite postopek (oris, besedni opis, osebna povezava) ne izdelka. Pravo vprašanje ni tehnologija, ampak ali misel in izražanje res pripadata osebi.

Aplikacijska naloga

Ponovno si zamislite pisno nalogo kot procesno: osnutek predložitve, kratek besedni opis in dodajte element osebne izkušnje. Nato nalogi priložite predlogo »Transparent AI usage statement«. V enem odstavku razložite, zakaj ta oblika otežuje tiskanje v celoti v AI.

kontrolni seznam

  • [ ] Izhoda detektorja AI nisem uporabil kot dokaz.
  • [ ] Spodbujal sem pregledno razkritje uporabe umetne inteligence.
  • [ ] Ocenil sem postopek (oris, opis), ne izdelka.
  • [ ] Nalogam sem dodal osebno povezavo in procesni element.
  • [ ] V primeru dvoma sem najprej iskal pošteno razpravo in dokaze.