Dobički:
- Sposobnost razumevanja analitičnih in celostnih vrst rubrik, kriterijev in konceptov ravni uspešnosti ter oblikovanja pregledne rubrike s podporo umetne inteligence.
- Sposobnost izdelave metrik, usklajenih z dosežki, in uteži točk za vrednotenje nalog uspešnosti, portfelja in projektov.
- Sposobnost razumevanja, da je odločitev o ocenjevanju in končni oceni učiteljeva, da umetna inteligenca ne more opraviti točkovanja sama in da mora doslednost preverjati učitelj.
Študentu je preprosto reči, da je ta projekt dobil 70; vendar študent vpraša "zakaj 70?" ali starš nasprotuje, morate imeti pošteno in zagovorljivo podlago. Ta osnova je rubrika: orodje za točkovanje, ki vnaprej pokaže, po katerih kriterijih in na kakšnih ravneh bo ocenjevan nastop (projekt, sestava, predstavitev, portfelj). Dobra rubrika pove študentu, "kaj se pričakuje od tebe", in naredi učiteljevo točkovanje dosledno in pregledno. Umetna inteligenca hitro pripravi metrike, povezane z dosežki, in definicije ravni; Vi določite poravnavo, pravičnost in uteži. Meja je jasna: ocenjevanje in končno vrednotenje je odločitev, ki vpliva na učenca; Odgovornost in končna odobritev pripada učitelju. AI ne more doseči točk sam.
Vrste in komponente rubrik
Obstajata dve osnovni vrsti. Analitična rubrika razdeli uspešnost na ločena merila – na primer »vsebina«, »organizacija«, »jezik in izražanje«, »pisanje« v eseju – in oceni vsako merilo na ločenih ravneh dosežka (npr. 4=zelo dobro, 3=dobro, 2=izboljšuje se, 1=začetek). Zagotavlja podrobne povratne informacije, vendar potrebuje čas za pripravo in točkovanje. Holistična rubrika daje celotni študiji enotno splošno raven; Je hiter, a ne pokaže, kje zamuja.
Sestavine analitične rubrike so: kriteriji (kaj ocenjujemo), nivoji (kako dobro), definicija nivoja posamezne celice (konkreten indikator tega nivoja) in uteži (kolikšen odstotek ocene je kateri kriterij). Opredelitev dobre ravni je opazna: ne "dobro napisano", ampak "ne več kot 2 tipkarski napaki in odstavki v logičnem vrstnem redu".
Nasvet: delite rubriko s študentom PRED nalogo. Rubrika ni orodje za beleženje presenečenja, ampak zemljevid učenja; Če študent ve, na čem mora delati, izdela boljši izdelek.
Doslednost in pravičnost
Prava vrednost rubrike je doslednost: ko dva učitelja dosežeta isto delo ob dveh različnih časih, mora biti rezultat podoben. To se imenuje zanesljivost ocenjevalca. Umetna inteligenca lahko ustvari oris rubrike, vendar učitelj zagotavlja doslednost: učiteljeva naloga je, da opise ravni naredi dovolj konkretne, da "umeri" nekaj študij primerov z rubriko (poskusno točkovanje) in da razjasni pravilo v obrobnih primerih.
V interesu pravičnosti rubrika ne sme točkovati stvari, ki niso pomembne za rezultat (lepota pisave, gradivo, do katerega študent potrebuje socialno-ekonomski dostop). AI včasih doda merila nedoseganja, kot je "estetika predstavitve"; Treba jih je razvrstiti.
Korak za korakom: Oblikovanje rubrike z AI
- Navedite nalogo in dosežek. Kaj bo rubrika merila, je odvisno od rezultata.
- Izberite žanr. Če želite podrobne povratne informacije, analitične; če želite hitro splošno presojo, celostno.
- Zahtevajte merila, vendar jih filtrirajte. 3-5 kriterijev glede dosežkov; odstranite nepomembne.
- Konkretne definicije ravni. Zahtevajte opazne kazalnike.
- Shujšati. Kateri kriterij je bolj pomemben? Naj bo skupno 100.
- Umerite. Ocenite 1-2 vzorčni študiji z rubrikami in doslednostjo testa.
- Sprejmi končno odločitev. Tudi če umetna inteligenca predlaga vzorčni rezultat, učitelj poda končno oceno.
trije mini kovčki
Primer 1 – Izločanje merila nedoseganja. Turški učitelj je prosil AI za analitično rubriko za esej. Umetna inteligenca je predlagala 5 meril, eno pa je bilo "lepota rokopisa" - merilo, ki ni bilo pomembno za rezultat in je nepravično kaznovalo študenta s premalo razvito pisavo. Učitelj ga je vzel ven in ga nadomestil z "razvojom ideje". Rubrika je bila poštena in usklajena z dosežki.
Primer 2 – Konkretizacija. V prvi rubriki enega učitelja so bile stopnje abstraktne, na primer "zelo dobro / dobro / pošteno"; Dva študenta sta opravila različne ravni podobnega dela. Rekel je AI, naj "prepiše vsako raven z opaznim indikatorjem." Ko so prispele konkretne definicije, kot je "Dobro = vsaj 3 primeri in jasen sklepni odstavek", se je doslednost povečala in ugovori zmanjšali.
Primer 3 – Kalibracija. Pri vrednotenju projekta je učitelj najprej ocenil 3 vzorčne projekte z rubriko, ki jo je izdelal AI. AI je nekomu ponudil 85; Učitelj je ugotovil, da je isti projekt rubrika 72, ker je umetna inteligenca en kriterij interpretirala preveč velikodušno. Učitelj je razjasnil opis ravni in sam določil končne ocene. AI je pospešil osnutek; Odločil se je učitelj.
Kopirane predloge
1) Oris analitične rubrike:
Vaša vloga: [predmetni] učitelj. Naloga: "[napiši uspešnostno nalogo]", dosežek: "[dosežek]", [X. razred]. Ustvarite analitično rubriko s 4 kriteriji. Vsako merilo naj bo povezano z izidom (DODAJTE neobjektivna merila, kot sta pisava in estetika). Napišite 4 stopnje uspeha in OPAZLJIV indikator za vsako stopnjo. Obtežite merila, tako da je skupno 100.
2) Konkretiziranje definicij ravni:
Opisi ravni naslednje rubrike so zelo abstraktni ("dobro", "primerno"). Prepišite vsako raven z opaznimi, štetimi indikatorji (npr. "ne več kot 2 napaki", "vsaj 3 primeri"). Rubrika: [prilepi]
3) Holistična rubrika (hitra ocena):
Napišite 4-nivojsko celostno rubriko za "[naloga]". Naj vsaka raven opazno opiše splošno naravo dela v enem odstavku. Ojačanje: "[ojačanje]". Podajte tudi notna območja.
4) Preverjanje kalibracije:
Spodaj je rubrika in študentsko delo. Glede na rubriko navedite svojo stopnjo pri posameznem ukrepu z utemeljitvijo. Daj to kot PREDLOG; Podal bom končno oceno. Označite kriterije, ki ostajajo nejasni. Rubrika + študija: [prilepi]
Šibek poziv/močan poziv
Šibek poziv:
Napišite rubriko za projekt.
Brez naloge, dosežka, vrste, števila kriterijev, teže; Prikaže se nedosežek in abstraktna rubrika.
Močan poziv:
Vaša vloga: učitelj naravoslovja. Naloga: »Učenec razišče obnovljivi vir energije in pripravi plakat.« Cilj: "Učenec razloži princip delovanja in prednosti energenta." 7. razred. Analitična rubrika s 4 kriteriji: vsebinska točnost, jasnost razlage, uporaba virov, vrstnost. Dodajanje kriterijev nedoseganja. Naj bo vsak nivo opazen; Vsota uteži je 100.
funkcija
Analitična rubrika
celostna rubrika
Število meril
Večkratno, točkovano ločeno
Enotna splošna sodba
Povratne informacije
Podrobno, na podlagi meril
Splošno
hitrost
počasi
hitro
najbolj primeren
Proces/razvoj spretnosti
Hitri pregled
Prispevek AI
Kriteriji + oris stopnje
Osnutek odstavka ravni
Pogoste napake
- Ukrep nedosegljivosti. Točkovanje stvari, ki niso povezane z izidom, kot so rokopis, estetika in dostop do materialov, premaga pravičnost.
- Definicija abstraktne ravni. Opredelitve, kot je "dobro/pošteno", vodijo v nedoslednost in ugovore; Uporabite opazen indikator.
- Prikaz rubrike pozneje. Nedeljenje pred nalogo prikrajša učenca za cilj.
- Izdelava ocene AI. AI lahko predlaga vzorčne rezultate, vendar učitelj poda končno oceno; Nadzor doslednosti je učiteljev.
- Preskok kalibracije. Uporaba rubrike brez preizkušanja s študijami primerov prinaša presenetljive rezultate.
Pozor: Mamljivo, a tvegano je dati umetni inteligenci študentsko delo in reči "oceni". Študentsko delo lahko vsebuje osebne podatke (anonimiziraj) in ocena AI je lahko nedosledna/pristranska. Uporabite AI, da PREDLAGATE točke in opišete povratne informacije; Vi se odločite.
Če povzamem
Rubrika je orodje, ki naredi ocenjevanje pregledno, dosledno in ubranljivo. Analitična rubrika zagotavlja podrobne povratne informacije na podlagi kriterijev, celostna rubrika zagotavlja hitro splošno presojo. AI hitro pripravi metrike, povezane z dosežki, konkretne definicije ravni in uteži; Vendar pa je učiteljeva odgovornost, da razvrsti merila neuspešnosti, omogoči opazovanje ravni, jih umeri in poda končno oceno. Ocena je odločitev, ki vpliva na učenca; Ni preneseno na AI.
Aplikacijska naloga
Ustvarite rubriko s 4 merili s predlogo »Oris analitične rubrike« za nalogo uspešnosti, ki jo boste dali kmalu. Odstranite vsa merila nedoseganja in omogočite opazovanje definicij ravni. Nato preizkusite doslednost z točkovanjem vaših (ali hipotetičnih) 2 vzorčnih študij s to rubriko; Ocenite, ali rezultati obeh študij odražajo njune prave lastnosti, in prilagodite svojo rubriko.
kontrolni seznam
- [ ] Ali so vsi kriteriji povezani z dosežki (brez meril za nedoseganje)?
- [ ] Ali so definicije ravni opazne in konkretne?
- [ ] Določil sem uteži in njihova vsota je 100?
- [ ] Ali bom delil rubriko s študentom pred nalogo?
- [ ] Ali sem rubriko umeril z vzorčnim delom in sam dal končno oceno?