Nyereség:
- Képes az elemző és holisztikus rubrikatípusok, kritériumok és sikerszintű koncepciók megértésére és átlátható rubrika tervezésére mesterséges intelligencia támogatásával.
- Képesség teljesítményhez igazított mérőszámok és pontsúlyok előállítására a teljesítményfeladatokhoz, portfóliókhoz és projektek értékeléséhez.
- Képes annak megértésére, hogy az osztályzatok és a végső értékelés döntése a tanáré, hogy a mesterséges intelligencia nem tudja egyedül elvégezni a pontozást, és hogy a következetességet a tanárnak kell ellenőriznie.
Könnyű azt mondani egy diáknak, hogy „ez a projekt 70-et kapott”; de a diák megkérdezi: "miért 70?" vagy a szülő tiltakozik, akkor tisztességes és védhető alappal kell rendelkeznie. Ez az alap a rubrika: egy pontozó eszköz, amely előre megmutatja, hogy egy teljesítmény (projekt, kompozíció, prezentáció, portfólió) milyen szempontok szerint és milyen szinten kerül értékelésre. Egy jó rubrika egyrészt elmondja a tanulónak, hogy „mit várnak el tőled”, másrészt egységessé és átláthatóvá teszi a tanár pontozását. Az AI gyorsan elkészíti az elért eredményekkel kapcsolatos mutatókat és szintdefiníciókat; Ön határozza meg az igazítást, az igazságosságot és a súlyokat. A határ egyértelmű: Az osztályozás és a végső értékelés a tanulót érintő döntés; A felelősség és a végső jóváhagyás a tanárt illeti. Az AI nem tud egyedül szerezni.
A rubrika típusai és összetevői
Két alaptípus létezik. Az elemzési rubrika a teljesítményt külön kritériumokra bontja – például „tartalom”, „szervezet”, „nyelv és kifejezés”, „írás” egy esszében –, és mindegyik kritériumot külön-külön teljesítményszinten értékeli (pl. 4=nagyon jó, 3=jó, 2=fejlődés, 1=kezdet). Részletes visszajelzést ad, de időbe telik a felkészülés és a pontozás. A holisztikus rubrika egyetlen általános szintet ad az egész tanulmánynak; Gyors, de nem mutatja, hol marad el.
Az elemzési rubrika összetevői a következők: kritériumok (amit értékelünk), szintek (mennyire jó), az egyes cellák szintjének meghatározása (az adott szint konkrét mutatója) és a súlyok (melyik kritérium hány százaléka a pontszámnak). Megfigyelhető a jó szint meghatározása: nem "jól megírt", hanem "legfeljebb 2 elgépelési hiba és bekezdés logikai sorrendben".
Tipp: Oszd meg a rubrikát a tanulóval a feladat ELŐTT. A rubrika nem egy meglepetés jegyzeteszköz, hanem egy tanulási térkép; Ha a tanuló tudja, min dolgozzon, jobb terméket állít elő.
Következetesség és igazságosság
A rubrika igazi értéke a következetesség: ha két tanár két különböző időpontban pontozza ugyanazt a munkát, az eredménynek hasonlónak kell lennie. Ezt nevezik értékelő megbízhatóságnak. A mesterséges intelligencia elkészítheti a rubrika vázlatát, de a tanár biztosítja a konzisztenciát: a tanár feladata, hogy a szintleírásokat kellően konkretizálja, néhány esettanulmányt „kalibráljon” a rubrikával (próbapontozás), marginális esetekben pedig tisztázza a szabályt.
A méltányosság érdekében a rubrikának nem szabad pontoznia az eredmény szempontjából lényegtelen dolgokat (a kézírás szépsége, olyan anyagok, amelyekhez a hallgatónak társadalmi-gazdasági hozzáférésre van szüksége). A mesterséges intelligencia időnként olyan kritériumokat ad hozzá, amelyek nem teljesítenek, mint például a „prezentáció esztétikája”; Rendezni kell őket.
Lépésről lépésre: Rubrikatervezés AI-val
- Adja meg a feladatot és az eredményt. Az, hogy a rubrika mit fog mérni, attól függ, hogy melyik eredménytől.
- Válasszon műfajt. Ha részletes visszajelzést szeretne, elemző; ha gyors általános ítéletet akar, holisztikus.
- Kérjen kritériumokat, de szűrje le őket. 3-5 teljesítési kritérium; távolítsa el a lényegteleneket.
- Konkrét szint meghatározások. Kérjen megfigyelhető mutatókat.
- Lefogy. Melyik kritérium a fontosabb? Legyen összesen 100.
- Kalibrálni. Pontozzon 1-2 mintavizsgálatot rubrikákkal és tesztelje a konzisztenciát.
- Hozd meg a végső döntést. Még ha az AI mintapontszámot javasol is, a tanár adja a végső osztályzatot.
három mini tok
1. eset – Nem teljesítési feltétel kivétele. Egy török tanár analitikai rubrikát kért az AI-tól egy esszéhez. A mesterséges intelligencia öt kritériumot javasolt, de az egyik a „kézírás szépsége” volt – ez a kritérium irreleváns volt az eredmény szempontjából, és igazságtalanul büntette a tanulót a fejletlen kézírással. A tanár kivette, és az "ötletfejlesztés"-re cserélte. A rubrika tisztességes és az eredményekhez igazodó volt.
2. eset – Konkrétizálás. Az egyik tanár első rubrikájában a szintek elvontak voltak, például "nagyon jó / jó / korrekt"; Két diák különböző szintű hasonló munkát végzett. Azt mondta az AI-nak, hogy „írjon át minden szintet egy megfigyelhető indikátorral”. Amikor olyan konkrét meghatározások születtek, mint a "Jó = legalább 3 példa és egy világos következtetési bekezdés", nőtt a következetesség és csökkentek az ellenvetések.
3. eset – Kalibrálás. A projektértékelés során a tanár először 3 mintaprojektet pontozott az AI által készített rubrikával. Az AI 85-öt ajánlott fel valakinek; A tanár ugyanezt a projektet a 72-es rubrikának találta, mert az AI túlságosan nagyvonalúan értelmezte az egyik kritériumot. A tanár pontosította a szintleírást és maga adta a végső osztályzatokat. Az AI felgyorsította a tervezetet; A tanár döntött.
Másolható sablonok
1) Az analitikai rubrika vázlata:
Az Ön szerepe: [tantárgy] tanár. Feladat: „[teljesítményfeladat írása]”, teljesítmény: „[teljesítmény]”, [X. osztály]. Hozzon létre egy elemző rubrikát 4 feltétellel. Legyen minden kritérium kapcsolódva az eredményhez (adjon hozzá nem objektív kritériumokat, mint például a kézírás és az esztétika). Minden szinthez írjon 4 sikerszintet és egy MEGFIGYELHETŐ mutatót. Súlyozza le a kritériumokat úgy, hogy a teljes összeg 100 legyen.
2) A szintdefiníciók konkretizálása:
A következő rubrika szintleírásai nagyon absztraktak ("jó", "tisztességes"). Írjon át minden szintet megfigyelhető, megszámlálható mutatókkal (pl. "legfeljebb 2 hiba", "legalább 3 példa"). Rubrika: [beillesztés]
3) Holisztikus rubrika (gyors értékelés):
Írjon egy 4 szintű holisztikus rubrikát a „[feladat]” számára. Minden szint megfigyelhetően írja le a munka általános jellegét egyetlen bekezdésben. Gain: "[nyereség]". Adja meg a jegyzettartományokat is.
4) Kalibrálás ellenőrzése:
Az alábbiakban egy rubrika és egy diákmunka található. A rubrikának megfelelően minden ütemben, indoklással adja meg a szintjét. Adja meg ezt JAVASLATként; A végső osztályzatot én adom. Jelölje meg a tisztázatlan feltételeket. Rubrika + tanulmány: [beillesztés]
Gyenge felszólítás / Erős felszólítás
Gyenge felszólítás:
Írj egy rubrikát a projekthez.
Nincs feladat, teljesítmény, típus, kritériumok száma, súlya; Megjelenik egy nem elért és absztrakt rubrika.
Erőteljes felszólítás:
Az Ön szerepe: természettudományos tanár. Feladat: "A tanuló megújuló energiaforrást kutat és plakátot készít." Cél: "A tanuló elmagyarázza az energiaforrás működési elvét és előnyeit." 7. osztály. Elemző rubrika 4 szemponttal: tartalmi pontosság, magyarázat egyértelműsége, forráshasználat, sorrend. Nem teljesítési kritériumok hozzáadása. Minden szint legyen megfigyelhető; A súlyok összege 100.
jellemzője
Elemző rubrika
holisztikus rubrika
Kritériumok száma
Több, külön pontozva
Egyetlen általános ítélet
Visszajelzés
Részletes, kritérium alapú
tábornok
sebesség
lassú
gyors
legalkalmasabb
Folyamat/készségfejlesztés
Gyors áttekintés
Az AI hozzájárulása
Kritériumok + szintvázlat
Szintű bekezdéstervezet
Gyakori hibák
- Nem teljesítési mérték. Az eredménytől független dolgok – például a kézírás, az esztétika és az anyagokhoz való hozzáférés – pontozása legyőzi a méltányosságot.
- Absztrakt szint meghatározása. Az olyan definíciók, mint a „jó/tisztességes”, következetlenséghez és ellenvetésekhez vezetnek; Használjon megfigyelhető indikátort.
- A rubrika később megjelenik. A feladat előtti megosztás megfosztja a tanulót a céltól.
- Az AI fokozat elkészítése. Az AI mintapontszámokat javasolhat, de a tanár megadja a végső osztályzatot; A következetesség ellenőrzése a tanáré.
- Kalibrálás kihagyása. A rubrika használata anélkül, hogy esettanulmányokkal kipróbálná, meglepő eredményeket hoz.
Vigyázat: Csábító, de kockázatos diákmunkát adni az AI-nak, és azt mondani, hogy „pontozzuk”. A tanulói munkák személyes adatokat tartalmazhatnak (anonimizálják), és az AI pontszáma következetlen/elfogult lehet. Használja az AI-t a pontok JAVASOLÁSÁRA és a visszajelzések felvázolására; Te döntesz.
Összefoglalva
A rubrika az az eszköz, amely átláthatóvá, következetessé és védhetővé teszi az értékelést. Az analitikus rubrika kritérium alapú részletes visszajelzést, a holisztikus rubrika gyors általános megítélést ad. Az AI gyorsan elkészíti az eredményekhez kapcsolódó mérőszámokat, konkrét szintdefiníciókat és súlyokat; De a nem teljesítési kritériumok kiválogatása, a szintek megfigyelhetővé tétele, kalibrálása és a végső osztályzat megadása a tanár felelőssége. Az osztályzat a tanulót érintő döntés; Nincs delegálva az AI-ra.
Pályázati feladat
Hozzon létre egy 4 feltételes rubrikát az „Elemző rubrikavázlat” sablonnal egy hamarosan elvégzendő teljesítményfeladathoz. Távolítson el minden nem teljesítési kritériumot, és tegye megfigyelhetővé a szintdefiníciókat. Ezután tesztelje a konzisztenciát úgy, hogy pontozza a (vagy feltételezett) 2 mintavizsgálatát ezzel a rubrikával; Mérje fel, hogy a két tanulmány pontszáma tükrözi-e valódi tulajdonságaikat, és módosítsa a rubrikát.
ellenőrző lista
- [ ] Összefügg az összes kritérium teljesítésével (nincs nem teljesítési kritérium)?
- [ ] Megfigyelhetőek és konkrétak a szintdefiníciók?
- [ ] Meghatároztam a súlyokat és összegük 100?
- [ ] Megosztom a rubrikát a tanulóval a feladat előtt?
- [ ] A mintamunkával kalibráltam a rubrikát, és magam adtam a végső osztályzatot?