Câștiguri:
- Abilitatea de a înțelege tipurile de rubrici analitice și holistice, criteriile și conceptele de nivel de succes și de a proiecta o rubrică transparentă cu sprijinul inteligenței artificiale.
- Abilitatea de a produce metrici aliniate la realizări și ponderi de puncte pentru evaluarea sarcinilor de performanță, a portofoliului și a proiectelor.
- Capacitatea de a înțelege că decizia de a acorda note și evaluarea finală aparține profesorului, că inteligența artificială nu poate face singura notarea și că consecvența trebuie verificată de profesor.
Este ușor să-i spui unui student „acest proiect a primit 70”; dar elevul întreabă „de ce 70?” sau părintele obiectează, trebuie să aveți o bază echitabilă și de apărat. Această bază este grila: un instrument de punctare care arată în prealabil după ce criterii și la ce niveluri va fi evaluată o performanță (proiect, compoziție, prezentare, portofoliu). O rubrică bună îi spune elevului „ce se așteaptă de la tine” și face ca punctajul profesorului să fie consistent și transparent. AI elaborează rapid valorile legate de realizare și definițiile nivelurilor; Tu stabilești alinierea, corectitudinea și ponderile. Limita este clară: notarea și evaluarea finală este o decizie care afectează elevul; Responsabilitatea și aprobarea finală aparține profesorului. AI nu poate marca singur.
Tipuri de rubrici și componente
Există două tipuri de bază. Rubrica analitică descompune performanța în criterii separate – de exemplu, „conținut”, „organizare”, „limbaj și expresie”, „scriere” într-un eseu – și punctează fiecare criteriu la niveluri separate de realizare (de exemplu, 4=foarte bine, 3=bun, 2=îmbunătățire, 1=început). Oferă feedback detaliat, dar necesită timp pentru a se pregăti și a puncta. Rubrica holistică oferă un singur nivel general întregului studiu; Este rapid, dar nu arată unde este scurt.
Componentele unei rubrici analitice sunt: criteriile (ce evaluăm), nivelurile (cât de bun), definirea nivelului fiecărei celule (indicator concret al nivelului respectiv) și ponderi (ce procent din punctaj este care criteriu). Definiția nivelului bun este observabilă: nu „bine scris” ci „nu mai mult de 2 greșeli de scriere și paragrafe în ordine logică”.
Sfat: Împărtășiți grila cu elevul ÎNAINTE de sarcină. Rubrica nu este un instrument de note surpriză, ci o hartă de învățare; Dacă elevul știe la ce să lucreze, el produce un produs mai bun.
Consecvență și corectitudine
Valoarea reală a rubricii este consecvența: atunci când doi profesori notează aceeași lucrare în două momente diferite, rezultatul ar trebui să fie similar. Aceasta se numește fiabilitate a evaluatorului. AI poate produce schița rubricii, dar profesorul oferă consecvența: este datoria profesorului să facă descrierile nivelurilor suficient de concrete, să „calibreze” câteva studii de caz cu rubrica (notarea procesului) și să clarifice regula în cazurile marginale.
În interesul corectitudinii, grila nu ar trebui să puncteze lucruri irelevante pentru rezultat (frumusețea scrisului de mână, material la care elevul are nevoie de acces socioeconomic). AI adaugă uneori criterii de nerealizare, cum ar fi „estetica prezentării”; Este necesar să le sortăm.
Pas cu pas: proiectarea rubricii cu AI
- Dați sarcina și realizarea. Ceea ce va măsura grila depinde de rezultat.
- Alegeți genul. Dacă doriți feedback detaliat, analitic; dacă vrei o judecată generală rapidă, holistică.
- Cereți criterii, dar filtrează-le. 3-5 criterii privind realizarea; eliminați-le pe cele irelevante.
- Definiții de nivel concret. Solicitați indicatori observabili.
- Pierde in greutate. Care criteriu este mai important? Fie ca totalul să fie 100.
- Calibra. Notați 1-2 studii eșantion cu rubrici și consistența testului.
- Luați decizia finală. Chiar dacă AI sugerează un punctaj eșantion, profesorul dă nota finală.
trei mini cutii
Cazul 1 — Extragerea criteriului de nerealizare. Un profesor turc a cerut AI o rubrică analitică pentru un eseu. AI a propus 5 criterii, dar unul a fost „frumusețea scrisului de mână” – un criteriu care era irelevant pentru rezultat și penaliza în mod nedrept elevul cu un scris de mână subdezvoltat. Profesorul l-a scos și l-a înlocuit cu „dezvoltarea ideii”. Grila a fost atât echitabilă, cât și aliniată la realizare.
Cazul 2 — Concretizarea. În prima rubrică a unui profesor, nivelurile erau abstracte, cum ar fi „foarte bine/bine/corect”; Doi studenți au luat niveluri diferite de muncă similară. El a spus AI să „rescrie fiecare nivel cu un indicator observabil”. Când au ajuns definiții concrete precum „Bine = cel puțin 3 exemple și un paragraf clar de concluzie”, consecvența a crescut și obiecțiile au scăzut.
Cazul 3 — Calibrare. Într-o evaluare a unui proiect, profesorul a punctat mai întâi 3 proiecte eșantion cu grila produsă de AI. AI a oferit 85 cuiva; Profesorul a găsit același proiect o rubrica 72, deoarece AI interpretase un criteriu cu prea multă generozitate. Profesorul a clarificat descrierea nivelului și a atribuit el însuși notele finale. AI a accelerat pescajul; Profesorul a luat decizia.
Șabloane copiabile
1) Structura analitică a rubricii:
Rolul tău: [subiect] profesor. Sarcină: „[scrie sarcina de performanță]”, realizare: „[realizare]”, [X. clasă]. Creați o rubrică analitică cu 4 criterii. Fie ca fiecare criteriu să fie legat de rezultat (ADĂUGAȚI criterii neobiective, cum ar fi scrisul de mână și estetica). Scrieți 4 niveluri de succes și un indicator OBSERVABIL pentru fiecare nivel. Ponderați criteriile astfel încât totalul să fie 100.
2) Definiții de nivel concret:
Descrierile de nivel ale următoarei rubrici sunt foarte abstracte („bun”, „corect”). Rescrieți fiecare nivel cu indicatori observabili și numărabili (de exemplu, „nu mai mult de 2 erori”, „cel puțin 3 exemple”). Rubrica: [paste]
3) Rubrica holistică (evaluare rapidă):
Scrieți o rubrică holistică pe 4 niveluri pentru „[sarcină]”. Fiecare nivel să descrie în mod observabil natura generală a lucrării într-un singur paragraf. Câștig: „[câștig]”. Dați, de asemenea, intervale de note.
4) Verificarea calibrării:
Mai jos este o rubrica și lucrarea elevilor. Conform rubricii, precizează-ți nivelul în fiecare măsură, cu justificare. Dă asta ca SUGESTIE; Voi da nota finală. Marcați orice criteriu care rămâne neclar. Rubrica + studiu: [paste]
Prompt slab / Prompt puternic
Prompt slab:
Scrieți o rubrica pentru proiect.
Fără sarcină, realizare, tip, număr de criterii, greutate; Apare o rubrică de nerealizare și abstractă.
Solicitare puternică:
Rolul tău: profesor de științe. Sarcină: „Studentul cercetează o sursă de energie regenerabilă și pregătește un poster”. Obiectiv: „Elevul explică principiul de funcționare și avantajele sursei de energie”. clasa a VII-a. Rubrica analitică cu 4 criterii: acuratețea conținutului, claritatea explicației, utilizarea surselor, ordinea. Adăugarea criteriilor de nerealizare. Fiecare nivel să fie observabil; Suma greutăților este 100.
caracteristică
Rubrica analitică
rubrică holistică
Numărul de criterii
Multiplu, punctat separat
Judecata generala unica
Feedback
Detaliat, bazat pe criterii
general
viteza
lent
repede
cel mai potrivit
Dezvoltarea procesului/aptitudinilor
Prezentare generală rapidă
Contribuția AI
Criterii + schiță de nivel
Schița de paragraf de nivel
Greșeli comune
- Măsura de nerealizare. Punerea la punct a lucrurilor care nu au legătură cu rezultatul, cum ar fi scrisul de mână, estetica și accesul la materiale, învinge corectitudinea.
- Definirea nivelului abstract. Definiții precum „bun/corect” duc la inconsecvență și obiecție; Utilizați un indicator observabil.
- Afișează rubrica mai târziu. A nu împărtăși înainte de sarcina îl privează pe student de obiectiv.
- Efectuarea notei AI. AI poate sugera scoruri eșantion, dar profesorul dă nota finală; Controlul consecvenței este al profesorului.
- Sari peste calibrare. Folosirea rubricii fără a o încerca cu studii de caz aduce rezultate surprinzătoare.
Atenție: Este tentant, dar riscant să-i oferi AI o lucrare de student și să spui „scorează”. Lucrările studenților pot conține date personale (anonimizare), iar scorul AI poate fi inconsecvent/ părtinitor. Folosiți AI pentru a SUGERE puncte și pentru a schița feedback-ul; Tu decizi.
În concluzie
Rubrica este instrumentul care face evaluarea transparentă, consecventă și defensabilă. Grila analitică oferă feedback detaliat bazat pe criterii, grila holistică oferă o judecată generală rapidă. AI elaborează rapid valorile legate de realizare, definițiile de nivel concret și ponderile; Dar este responsabilitatea profesorului să trimită criteriile de nerealizare, să facă nivelurile observabile, să le calibreze și să dea nota finală. Nota este o decizie care afectează elevul; Nu este delegat AI.
Sarcina de aplicare
Creați o rubrică cu 4 criterii cu șablonul „Contur rubrica analitică” pentru o sarcină de performanță pe care o veți oferi în curând. Eliminați orice criteriu de nerealizare și faceți observabile definițiile nivelurilor. Apoi testați consistența notând cele 2 eșantion de studii (sau ipotetice) cu această rubrica; Evaluați dacă scorurile celor două studii reflectă adevăratele lor calități și faceți ajustări la grila dvs.
lista de verificare
- [ ] Sunt toate îndeplinirea criteriilor legate (nu există criterii de nerealizare)?
- [ ] Sunt definițiile nivelurilor observabile și concrete?
- [ ] Am determinat greutățile și suma lor este 100?
- [ ] Voi împărtăși rubrica cu elevul înainte de sarcină?
- [ ] Am calibrat grila cu eșantionul de lucru și am dat singur nota finală?