Eining 6 / 11

Mæling-mat og riðilhönnun: Viðmið, stig og samræmi

Hagnaður:

  • Hæfni til að skilja greiningar- og heildrænar gerðir, viðmið og árangursstigshugtök og hanna gagnsæja fræðiheiti með stuðningi gervigreindar.
  • Geta til að framleiða afrekssamræmdar mælikvarða og stigavigt fyrir frammistöðuverkefni, eignasafn og mat á verkefnum.
  • Hæfni til að skilja að ákvörðun um að gefa einkunnir og lokamat sé í höndum kennarans, að gervigreind geti ekki ein og sér gert einkunnagjöfina og að samræmi verður að vera athugað af kennara.

Það er auðvelt að segja nemanda „þetta verkefni fékk 70“; en nemandinn spyr "af hverju 70?" eða foreldri mótmælir, þá verður þú að hafa sanngjarnan og forsvaranlegan grundvöll. Þessi grunnur er matseðillinn: stigatól sem sýnir fyrirfram eftir hvaða forsendum og á hvaða stigum frammistaða (verkefni, samsetning, kynning, verkasafn) verður metin. Gott ritmál segir nemandanum „til hvers er ætlast af þér“ og gerir stigagjöf kennarans stöðugt og gagnsætt. gervigreind semur fljótt drög að afrekstengdum mælikvörðum og stigsskilgreiningum; Þú ákvarðar röðun, sanngirni og þyngd. Mörkin eru skýr: Einkunn og lokamat er ákvörðun sem snertir nemandann; Ábyrgð og endanlegt samþykki er kennarans. AI getur ekki skorað eitt og sér.

Tegundir og íhlutir á túlkunum

Það eru tvær grunngerðir. Greiningaraðferðin skiptir frammistöðu niður í aðskildar viðmiðanir – til dæmis „innihald“, „skipulag,“ „tungumál og tjáning“, „skrif“ í ritgerð – og skorar hvert viðmið á aðskildum árangri (t.d. 4=mjög gott, 3=gott, 2=bætir, 1=byrjun). Veitir nákvæma endurgjöf en tekur tíma að undirbúa og skora. Heildræn matseðill gefur eitt almennt stig fyrir allt námið; Það er hratt, en það sýnir ekki hvar það skortir.

Þættir greiningarhóps eru: viðmið (hvað við metum), stig (hversu góð), stigsskilgreining á hverri hólfi (áþreifanlegur vísir fyrir það stig) og vægi (hvaða prósenta af stiginu er hvaða viðmiðun). Skilgreiningin á góðu stigi er áberandi: ekki "vel skrifað" heldur "ekki fleiri en 2 innsláttarvillur og málsgreinar í rökréttri röð".

Ábending: Deildu leiðbeiningunum með nemandanum ÁÐUR en verkefnið er gert. Rubric er ekki óvænt athugasemdatól, heldur námskort; Ef nemandinn veit að hverju hann á að vinna framleiðir hann betri vöru.

Samræmi og sanngirni

Raunverulegt gildi riðilsins er samræmi: þegar tveir kennarar skora sömu vinnu á tveimur mismunandi tímum ætti útkoman að vera svipuð. Þetta er kallað áreiðanleiki matsaðila. Gervigreind getur framleitt útlínur fræðiritsins, en kennarinn sér um samræmið: það er hlutverk kennarans að gera stigalýsingarnar nægilega áþreifanlegar, „kvarða“ nokkrar dæmisögur með riðlinum (prófastig) og að skýra regluna í jaðartilfellum.

Í þágu sanngirni ætti matseðillinn ekki að skora hluti sem eru óviðkomandi útkomunni (fegurð rithöndarinnar, efni sem nemandinn þarf félagshagfræðilegan aðgang að). gervigreind bætir stundum við viðmiðum sem ekki hafa náðst eins og „kynningarfagurfræði“; Nauðsynlegt er að raða þeim upp.

Skref fyrir skref: Rubric hönnun með gervigreind

  1. Gefðu verkefnið og afrekið. Hvað matseðillinn mun mæla fer eftir því hvaða útkoma.
  2. Veldu tegund. Ef þú vilt nákvæma endurgjöf, greinandi; ef þú vilt skjóta almenna dómgreind, heildræna.
  3. Biddu um viðmið, en síaðu þau. 3-5 viðmið varðandi árangur; fjarlægðu þau óviðkomandi.
  4. Skilgreiningar á steypustigi. Biðjið um áberandi vísbendingar.
  5. Léttast. Hvor viðmiðunin er mikilvægari? Látum þetta vera 100.
  6. Kvarða. Skora 1-2 úrtaksrannsóknir með reglunum og samræmi í prófunum.
  7. Taktu endanlega ákvörðun. Jafnvel þótt gervigreindin stingi upp á sýnishorni gefur kennarinn lokaeinkunn.

þrjú smámál

Tilvik 1 — Útdráttur viðmiðunar sem ekki er náð. Tyrkneskur kennari bað gervigreind um greiningarheiti fyrir ritgerð. AI lagði fram 5 viðmið, en eitt var „fegurð rithönd“ - viðmið sem skipti ekki máli fyrir niðurstöðuna og refsaði nemandanum á ósanngjarnan hátt með vanþróaðri rithönd. Kennarinn tók það út og setti "hugmyndaþróun" í staðinn. Yfirskriftin var bæði sanngjörn og afrekssamræmd.

Mál 2 — Námfesting. Í fyrstu ritmáli eins kennara voru stigin óhlutbundin, eins og „mjög gott / gott / sanngjarnt“; Tveir nemendur höfðu tekið mismunandi stig af svipaðri vinnu. Hann sagði gervigreindinni að „endurskrifa hvert stig með sýnilegum vísi“. Þegar áþreifanlegar skilgreiningar eins og „Gott = að minnsta kosti 3 dæmi og skýr niðurlagsgrein“ bárust jókst samræmið og andmælum fækkaði.

Tilfelli 3 - Kvörðun. Í verkefnamati skoraði kennarinn fyrst 3 sýnishorn af verkefnum með ritgerðinni sem gerð var af gervigreind. AI bauð einhverjum 85; Kennaranum fannst sama verkefni vera 72 vegna þess að gervigreindin hafði túlkað eina viðmiðun of rausnarlega. Kennari skýrði stigalýsingu og gaf sjálfur lokaeinkunn. AI flýtti fyrir drögunum; Kennarinn tók ákvörðunina.

Afritanleg sniðmát

1) Útlínur greiningarhóps:

Þitt hlutverk: [fag]kennari. Verkefni: "[skrifa frammistöðuverkefni]", afrek: "[afrek]", [X. bekk]. Búðu til greiningarhóp með 4 viðmiðum. Láttu hverja viðmiðun tengjast niðurstöðunni (ADD óhlutlæg viðmið eins og rithönd og fagurfræði). Skrifaðu 4 árangursstig og ATHUGIÐAN vísir fyrir hvert stig. Vigðu viðmiðin þannig að heildarfjöldinn sé 100.

2) Nákvæmar stigsskilgreiningar:

Lýsingar á stigum í eftirfarandi riti eru mjög óhlutbundnar ("góðar", "sanngjarnar"). Endurskrifaðu hvert stig með sjáanlegum, teljanlegum vísbendingum (t.d. „ekki fleiri en 2 villur“, „að minnsta kosti 3 dæmi“). Róm: [líma]

3) Heildræn matseðill (fljótt mat):

Skrifaðu 4 stiga heildrænan ritdóm fyrir "[verkefni]". Láttu hvert stig lýsa almennu eðli verksins í einni málsgrein. Hagnaður: "[gain]". Gefðu einnig athugasemdasvið.

4) Kvörðunarathugun:

Hér að neðan er ritlisti og verk nemenda. Tilgreindu stig þitt í hverjum mælikvarða, með rökstuðningi, samkvæmt matseðlinum. Gefðu þetta sem TILLÖGU; Ég mun gefa lokaeinkunn. Merktu við öll skilyrði sem eru enn óljós. Rubric + rannsókn: [líma]

Veik kvaðning / Sterk kvaðning

Veik kvaðning:

Skrifaðu ritgerð fyrir verkefnið.

Ekkert verkefni, árangur, tegund, fjöldi viðmiða, þyngd; Óákveðinn greinir í ensku óhlutbundinn ritdómur birtist.

Öflug tilvitnun:

Þitt hlutverk: náttúrufræðikennari. Verkefni: "Nemandi rannsakar endurnýjanlegan orkugjafa og útbýr veggspjald." Markmið: "Nemandi útskýrir vinnuregluna og kosti orkugjafans." 7. bekkur. Greiningaraðferð með 4 viðmiðum: nákvæmni innihalds, skýrar skýringar, notkun heimilda, röð. Bæta við viðmiðum sem ekki hafa náðst. Láttu hvert stig vera sýnilegt; Summa lóðanna er 100.

eiginleiki

Greiningarorð

heildræn yfirskrift

Fjöldi viðmiða

Margföld, skoruð sérstaklega

Einn almennur dómur

Endurgjöf

Ítarlegt, byggt á forsendum

Almennt

hraða

hægur

hratt

heppilegastur

Ferli/færniþróun

Fljótt yfirlit

Framlag gervigreindar

Viðmið + stig yfirlit

Stig málsgrein drög

Algeng mistök

  • Mál sem ekki er náð. Að skora hluti sem eru ótengdir niðurstöðunni, eins og rithönd, fagurfræði og aðgangur að efni, berst gegn sanngirni.
  • Skilgreining á abstrakt stigi. Skilgreiningar eins og „gott/sanngjarnt“ leiða til ósamræmis og andmæla; Notaðu sýnilegan vísi.
  • Sýnir matseðilinn síðar. Að deila ekki áður en verkefnið sviptir nemandann markmiðinu.
  • Gerir AI einkunn. Gervigreindin gæti stungið upp á sýnishornum, en kennarinn gefur lokaeinkunn; Samræmiseftirlit er kennarans.
  • Sleppir kvörðun. Að nota fræðiheitið án þess að prófa það með dæmisögum gefur óvæntar niðurstöður.
Varúð: Það er freistandi en áhættusamt að gefa gervigreind nemenda verk og segja „skora“ það. Verk nemenda geta innihaldið persónuleg gögn (nafnlaus) og stig gervigreindar geta verið ósamræmi/hlutdræg. Notaðu gervigreind til að STENGJA til stiga og útlista endurgjöf; Þú ræður.

Í stuttu máli

Rubric er tækið sem gerir mat gagnsætt, stöðugt og forsvaranlegt. Greinandi matseðill veitir nákvæma endurgjöf sem byggir á viðmiðum, heildræn matseðill veitir skjótan almennan dóm. AI gerir fljótt drög að afrekstengdum mælingum, skilgreiningum á steypustigi og lóðum; En það er á ábyrgð kennarans að raða niður viðmiðum sem ekki hafa náðst, gera stigin sýnileg, kvarða þau og gefa lokaeinkunn. Einkunn er ákvörðun sem hefur áhrif á nemandann; Það er ekki framselt til gervigreindar.

Umsóknarverkefni

Búðu til 4-viðmiða matseðil með sniðmátinu "Agreiningarrubric outline" fyrir frammistöðuverkefni sem þú munt gefa fljótlega. Fjarlægðu öll skilyrði sem ekki hafa náðst og gerðu stigsskilgreiningar sjáanlegar. Prófaðu síðan samkvæmni með því að skora (eða tilgátu) 2 sýnishornsrannsóknir þínar með þessu mati; Metið hvort stig rannsóknanna tveggja endurspegli raunverulega eiginleika þeirra og gerðu breytingar á matseðli þínu.

gátlisti

  • [ ] Eru allar viðmiðanir tengdar viðmiðum (engin viðmið án árangurs)?
  • [ ] Eru stigaskilgreiningarnar sjáanlegar og áþreifanlegar?
  • [ ] Ég ákvað lóðin og summan þeirra er 100?
  • [ ] Mun ég deila matseðlinum með nemandanum fyrir verkefnið?
  • [ ] Kvarði ég matseðilinn með sýnishorninu og gaf lokaeinkunnina sjálfur?