Njësia 6 / 11

Matja-Vlerësimi dhe Hartimi i Rubrikës: Kriteret, Niveli dhe Konsistenca

Fitimet:

  • Aftësi për të kuptuar llojet analitike dhe holistike të rubrikave, kriteret dhe konceptet e nivelit të suksesit dhe për të hartuar një rubrikë transparente me mbështetjen e inteligjencës artificiale.
  • Aftësia për të prodhuar metrika të harmonizuara me arritjet dhe peshat e pikëve për detyrën e performancës, portofolin dhe vlerësimin e projektit.
  • Aftësia për të kuptuar se vendimi për dhënien e notave dhe vlerësimin përfundimtar i takon mësuesit, se inteligjenca artificiale nuk mund të bëjë pikët e vetme dhe se konsistenca duhet të kontrollohet nga mësuesi.

Është e lehtë t'i thuash një studenti "ky projekt mori 70"; por studenti pyet "pse 70?" ose prindi kundërshton, ju duhet të keni një bazë të drejtë dhe të mbrojtur. Kjo bazë është rubrika: një mjet pikëzimi që tregon paraprakisht sipas cilave kritere dhe në çfarë nivelesh do të vlerësohet një performancë (projekt, përbërje, prezantim, portofol). Një rubrikë e mirë i tregon nxënësit "çfarë pritet nga ju" dhe e bën vlerësimin e mësuesit të qëndrueshëm dhe transparent. AI harton shpejt metrikat e lidhura me arritjet dhe përkufizimet e nivelit; Ju përcaktoni shtrirjen, drejtësinë dhe peshat. Kufiri është i qartë: Notimi dhe vlerësimi përfundimtar është një vendim që prek studentin; Përgjegjësia dhe miratimi përfundimtar i takon mësuesit. AI nuk mund të shënojë vetëm.

Llojet dhe përbërësit e rubrikës

Ka dy lloje themelore. Rubrika analitike zbërthen performancën në kritere të veçanta - për shembull, "përmbajtja", "organizimi", "gjuha dhe shprehja", "shkrimi" në një ese - dhe shënon secilin kriter në nivele të veçanta arritjesh (p.sh., 4=shumë mirë, 3=mirë, 2=përmirësim, 1=fillim). Ofron reagime të detajuara, por kërkon kohë për t'u përgatitur dhe për të shënuar. Rubrika holistike i jep një nivel të vetëm të përgjithshëm të gjithë studimit; Është i shpejtë, por nuk tregon se ku i bie.

Përbërësit e një rubrike analitike janë: kriteret (çfarë vlerësojmë ne), nivelet (sa mirë), përcaktimi i nivelit të secilës qelizë (treguesi konkret i atij niveli) dhe peshat (sa përqindje e pikës është cili kriter). Përkufizimi i nivelit të mirë është i vëzhgueshëm: jo "i shkruar mirë", por "jo më shumë se 2 gabime shtypi dhe paragrafë në rend logjik".

Këshillë: Ndani rubrikën me nxënësin PARA detyrës. Rubrika nuk është një mjet shënimi surprizë, por një hartë mësimore; Nëse studenti e di se për çfarë të punojë, ai prodhon një produkt më të mirë.

Konsistenca dhe drejtësia

Vlera reale e rubrikës është qëndrueshmëria: kur dy mësues shënojnë të njëjtën punë në dy kohë të ndryshme, rezultati duhet të jetë i ngjashëm. Kjo quhet besueshmëria e vlerësuesit. AI mund të prodhojë skicën e rubrikës, por mësuesi ofron konsistencën: detyra e mësuesit është të bëjë përshkrimet e nivelit mjaftueshëm konkret, të "kalibroj" disa raste studimore me rubrikën (pikëzimi i provës) dhe të qartësojë rregullin në rastet margjinale.

Në interes të drejtësisë, rubrika nuk duhet të shënojë gjëra të parëndësishme për rezultatin (bukuria e shkrimit të dorës, materiali në të cilin studenti ka nevojë për qasje socio-ekonomike). AI ndonjëherë shton kritere të mosarritjes si "estetika e prezantimit"; Është e nevojshme t'i zgjidhim ato.

Hap pas hapi: Dizajn rubrika me AI

  1. Jepni detyrën dhe arritjen. Çfarë do të masë rubrika varet nga cili rezultat.
  2. Zgjidhni zhanrin. Nëse dëshironi reagime të hollësishme, analitike; nëse doni një gjykim të shpejtë të përgjithshëm, holistik.
  3. Kërkoni kritere, por filtrojini ato. 3-5 kritere në lidhje me arritjet; hiqni ato të parëndësishmet.
  4. Përkufizime konkrete të nivelit. Kërkoni tregues të vëzhgueshëm.
  5. Humbni peshë. Cili kriter është më i rëndësishëm? Le të jetë gjithsej 100.
  6. Kalibroni. Shënoni 1-2 studime mostra me rubrika dhe konsistencë testimi.
  7. Merrni vendimin përfundimtar. Edhe nëse AI sugjeron një rezultat mostër, mësuesi jep notën përfundimtare.

tre mini kuti

Rasti 1 - Nxjerrja e kriterit të mosarritjes. Një mësues turk i kërkoi AI një rubrikë analitike për një ese. AI propozoi 5 kritere, por njëri ishte "bukuria e shkrimit të dorës" - një kriter që ishte i parëndësishëm për rezultatin dhe penalizonte në mënyrë të padrejtë studentin me shkrim dore të pazhvilluar. Mësuesi e nxori atë dhe e zëvendësoi me "zhvillimin e idesë". Rubrika ishte e drejtë dhe e përafruar me arritjet.

Rasti 2 — Konkretizimi. Në rubrikën e parë të një mësuesi, nivelet ishin abstrakte, si "shumë mirë / mirë / drejtë"; Dy studentë kishin marrë nivele të ndryshme të punës së ngjashme. Ai i tha AI të "rishkruajë çdo nivel me një tregues të vëzhgueshëm". Kur arritën përkufizime konkrete si "Mirë = të paktën 3 shembuj dhe një paragraf i qartë përfundimi", qëndrueshmëria u rrit dhe kundërshtimet u ulën.

Rasti 3 - Kalibrimi. Në një vlerësim të projektit, mësuesi fillimisht shënoi 3 projekte mostër me rubrikën e prodhuar nga AI. AI i ofroi 85 dikujt; Mësuesi e gjeti të njëjtin projekt si rubrikën 72, sepse AI e kishte interpretuar një kriter me shumë bujari. Mësuesi sqaroi përshkrimin e nivelit dhe caktoi vetë notat përfundimtare. UA e përshpejtoi draftin; Mësuesi e mori vendimin.

Modele të kopjueshme

1) Skica e rubrikës analitike:

Roli juaj: mësuesi [lënda]. Detyra: "[shkruaj detyrën e performancës]", arritje: "[arritje]", [X. klasë]. Krijo një rubrikë analitike me 4 kritere. Çdo kriter le të lidhet me rezultatin (SHTO kritere jo objektive si shkrimi i dorës dhe estetika). Shkruani 4 nivele suksesi dhe një tregues të VËZHUR për secilin nivel. Peshoni kriteret në mënyrë që totali të jetë 100.

2) Konkretizimi i përkufizimeve të nivelit:

Përshkrimet e nivelit të rubrikës së mëposhtme janë shumë abstrakte ("mirë", "e drejtë"). Rishkruani çdo nivel me tregues të vëzhgueshëm dhe të numërueshëm (p.sh. "jo më shumë se 2 gabime", "të paktën 3 shembuj"). Rubrika: [ngjit]

3) Rubrika holistike (vlerësim i shpejtë):

Shkruani një rubrikë gjithëpërfshirëse me 4 nivele për "[detyrë]". Lëreni çdo nivel të përshkruajë në mënyrë të dukshme natyrën e përgjithshme të punës në një paragraf të vetëm. Fitimi: "[fitimi]". Jepni gjithashtu vargjet e shënimeve.

4) Kontrolli i kalibrimit:

Më poshtë rubrika dhe puna e nxënësve. Sipas rubrikës, tregoni nivelin tuaj në çdo masë, me arsyetim. Jep këtë si sugjerim; Unë do të jap notën përfundimtare. Shënoni çdo kriter që mbetet i paqartë. Rubrika + studimi: [paste]

Prompt i dobët / Prompt i fortë

Njoftim i dobët:

Shkruani një rubrikë për projektin.

Asnjë detyrë, arritje, lloji, numri i kritereve, pesha; Shfaqet një rubrikë e paarritshme dhe abstrakte.

Njoftim i fuqishëm:

Roli juaj: mësues i shkencës. Detyrë: “Nxënësi hulumton një burim energjie të rinovueshme dhe përgatit një poster”. Objektivi: “Nxënësi shpjegon parimin e punës dhe avantazhet e burimit të energjisë”. klasa e 7-të. Rubrika analitike me 4 kritere: saktësia e përmbajtjes, qartësia e shpjegimit, përdorimi i burimeve, renditja. Shtimi i kritereve të mosarritjes. Le të jetë çdo nivel i vëzhgueshëm; Shuma e peshave është 100.

veçori

Rubrika analitike

rubrika holistike

Numri i kritereve

Të shumëfishta, të shënuara veçmas

Gjykimi i vetëm i përgjithshëm

Feedback

I detajuar, i bazuar në kritere

Gjeneral

shpejtësia

i ngadalshëm

shpejtë

më e përshtatshme

Procesi/zhvillimi i aftësive

Pasqyrë e shpejtë

Kontributi i AI

Kriteret + skica e nivelit

Drafti i paragrafit të nivelit

Gabimet e zakonshme

  • Masa e mosarritjes. Shënimi i gjërave që nuk kanë lidhje me rezultatin, si shkrimi i dorës, estetika dhe aksesi në materiale, e mposht drejtësinë.
  • Përkufizimi i nivelit abstrakt. Përkufizimet si "mirë/drejtë" çojnë në mospërputhje dhe kundërshtim; Përdorni tregues të vëzhgueshëm.
  • Duke e shfaqur rubrikën më vonë. Mosndarja para detyrës e privon nxënësin nga qëllimi.
  • Bërja e notës së AI. UA mund të sugjerojë rezultatet e mostrës, por mësuesi jep notën përfundimtare; Kontrolli i konsistencës është i mësuesit.
  • Duke anashkaluar kalibrimin. Përdorimi i rubrikës pa e provuar me raste studimore sjell rezultate befasuese.
Kujdes: Është joshëse, por e rrezikshme t'i japësh AI-së një punë studentore dhe të thuash "shëno" atë. Puna e studentëve mund të përmbajë të dhëna personale (anonimizohet) dhe rezultati i AI mund të jetë i paqëndrueshëm/i njëanshëm. Përdorni AI për të sugjeruar pika dhe për të përshkruar reagimet; Ju vendosni.

Në përmbledhje

Rubrika është mjeti që e bën vlerësimin transparent, të qëndrueshëm dhe të mbrojtur. Rubrika analitike ofron reagime të detajuara të bazuara në kritere, rubrika holistike ofron gjykim të shpejtë të përgjithshëm. AI harton shpejt metrikat e lidhura me arritjet, përkufizimet konkrete të nivelit dhe peshat; Por është përgjegjësi e mësuesit të zgjidhë kriteret e mosarritjes, t'i bëjë nivelet të vëzhgueshme, t'i kalibrojë dhe të japë notën përfundimtare. Nota është një vendim që prek studentin; Nuk i është deleguar AI.

Detyra e aplikimit

Krijo një rubrikë me 4 kritere me shabllonin "Përvijimi i rubrikës analitike" për një detyrë të performancës që do të jepni së shpejti. Hiqni çdo kriter të mosarritjes dhe bëjini të vëzhgueshme përkufizimet e nivelit. Më pas provoni konsistencën duke vlerësuar 2 studimet tuaja mostër (ose hipotetike) me këtë rubrikë; Vlerësoni nëse rezultatet e dy studimeve pasqyrojnë cilësitë e tyre të vërteta dhe bëni rregullime në rubrikën tuaj.

listë kontrolli

  • [ ] A janë të lidhura arritjet e të gjitha kritereve (pa kritere të mosarritjes)?
  • [ ] A janë të vëzhgueshme dhe konkrete përkufizimet e nivelit?
  • [ ] Përcaktova peshat dhe shuma e tyre është 100?
  • [ ] A do ta ndaj rubrikën me nxënësin përpara detyrës?
  • [ ] A e kam kalibruar rubrikën me modelin e punës dhe a kam dhënë vetë notën përfundimtare?