Gevinster:
- Evne til å forstå analytiske og holistiske rubrikktyper, kriterier og suksessnivåkonsepter og designe en transparent rubrikk med støtte fra kunstig intelligens.
- Evne til å produsere prestasjonsjusterte beregninger og poengvekter for ytelsesoppgave, portefølje og prosjektevaluering.
- Evne til å forstå at beslutningen om å gi karakterer og sluttevaluering tilhører læreren, at kunstig intelligens ikke kan gjøre skåringen alene, og at konsistens må kontrolleres av læreren.
Det er lett å fortelle en student "dette prosjektet fikk 70"; men eleven spør "hvorfor 70?" eller forelderen motsetter seg, må du ha et rettferdig og forsvarlig grunnlag. Dette grunnlaget er rubrikken: et skåringsverktøy som på forhånd viser etter hvilke kriterier og på hvilke nivåer en ytelse (prosjekt, sammensetning, presentasjon, portefølje) vil bli evaluert. En god rubrikk både forteller eleven «hva som forventes av deg» og gjør lærerens skåring konsistent og transparent. AI utarbeider raskt prestasjonsrelaterte beregninger og nivådefinisjoner; Du bestemmer justering, rettferdighet og vekter. Grensen er klar: Karaktersetting og sluttevaluering er en beslutning som berører eleven; Ansvaret og endelig godkjenning ligger hos læreren. AI kan ikke score alene.
Rubrikktyper og komponenter
Det er to grunnleggende typer. Den analytiske rubrikken bryter ned ytelse i separate kriterier – for eksempel «innhold», «organisasjon», «språk og uttrykk», «skriving» i et essay – og skårer hvert kriterium på separate prestasjonsnivåer (f.eks. 4=veldig bra, 3=bra, 2=forbedring, 1=begynnelse). Gir detaljerte tilbakemeldinger, men tar tid å forberede og score. Den holistiske rubrikken gir et enkelt generelt nivå til hele studiet; Den er rask, men den viser ikke hvor den kommer til kort.
Komponentene i en analytisk rubrikk er: kriterier (hva vi vurderer), nivåer (hvor gode), nivådefinisjon av hver celle (konkret indikator på det nivået) og vekter (hvor prosentandel av poengsummen er hvilket kriterium). Definisjonen av godt nivå er observerbar: ikke "godt skrevet" men "ikke mer enn 2 skrivefeil og avsnitt i logisk rekkefølge".
Tips: Del rubrikken med eleven FØR oppgaven. Rubrikken er ikke et overraskende notatverktøy, men et læringskart; Hvis eleven vet hva han skal jobbe med, produserer han et bedre produkt.
Konsistens og rettferdighet
Den virkelige verdien av rubrikken er konsistens: når to lærere scorer det samme arbeidet på to forskjellige tidspunkter, bør resultatet være likt. Dette kalles rater-pålitelighet. AI kan produsere rubrikkoversikten, men læreren sørger for konsistensen: det er lærerens jobb å gjøre nivåbeskrivelsene tilstrekkelig konkrete, å «kalibrere» noen få case-studier med rubrikken (prøvescoring), og å tydeliggjøre regelen i marginale tilfeller.
Av rettferdighets skyld bør ikke rubrikken skåre ting som er irrelevante for resultatet (håndskrifts skjønnhet, materiale som studenten trenger sosioøkonomisk tilgang til). AI legger noen ganger til ikke-oppnåelseskriterier som "presentasjonsestetikk"; Det er nødvendig å sortere dem.
Trinn for trinn: Rubrikkdesign med AI
- Gi oppgaven og prestasjonen. Hva rubrikken vil måle avhenger av hvilket utfall.
- Velg sjanger. Hvis du ønsker detaljert tilbakemelding, analytisk; hvis du vil ha rask generell vurdering, holistisk.
- Be om kriterier, men filtrer dem. 3-5 kriterier for prestasjon; fjerne de irrelevante.
- Definisjoner på konkrete nivåer. Be om observerbare indikatorer.
- Gå ned i vekt. Hvilket kriterium er viktigst? La totalsummen være 100.
- Kalibrer. Poeng 1-2 prøvestudier med rubrikker og testkonsistens.
- Ta den endelige avgjørelsen. Selv om AI foreslår en prøvepoengsum, gir læreren den endelige karakteren.
tre minisaker
Tilfelle 1 — Uttak av ikke-oppnåelseskriterier. En tyrkisk lærer ba AI om en analytisk rubrikk for et essay. AI foreslo 5 kriterier, men ett var "håndskriftskjønnhet" - et kriterium som var irrelevant for utfallet og urettferdig straffet studenten med underutviklet håndskrift. Læreren tok den ut og erstattet den med «idéutvikling». Rubrikken var både rettferdig og prestasjonstilpasset.
Sak 2 — Konkretisering. I en lærers første rubrikk var nivåene abstrakte, for eksempel "veldig bra / bra / rettferdig"; To studenter hadde tatt forskjellige nivåer av lignende arbeid. Han ba AI om å "skrive om hvert nivå med en observerbar indikator." Når konkrete definisjoner som «Bra = minst 3 eksempler og et tydelig konklusjonsavsnitt» kom, økte konsistensen og innvendingene avtok.
Tilfelle 3 — Kalibrering. I en prosjektevaluering scoret læreren først 3 eksempelprosjekter med rubrikken produsert av AI. AI tilbød 85 til noen; Læreren fant det samme prosjektet som en rubrikk 72 fordi AI hadde tolket ett kriterium for sjenerøst. Læreren avklarte nivåbeskrivelsen og fastsatte sluttkarakterene selv. AI akselererte utkastet; Læreren tok avgjørelsen.
Kopierbare maler
1) Analytisk rubrikkoversikt:
Din rolle: [fag] lærer. Oppgave: "[skriv ytelsesoppgave]", prestasjon: "[prestasjon]", [X. klasse]. Lag en analytisk rubrikk med 4 kriterier. La hvert kriterium være relatert til utfallet (LEGG TIL ikke-objektive kriterier som håndskrift og estetikk). Skriv 4 suksessnivåer og en OBSERVARBAR indikator for hvert nivå. Vekt kriteriene slik at totalen er 100.
2) Konkretisering av nivådefinisjoner:
Nivåbeskrivelsene til følgende rubrikk er veldig abstrakte ("bra", "rettferdig"). Omskriv hvert nivå med observerbare, tellbare indikatorer (f.eks. "ikke mer enn 2 feil", "minst 3 eksempler"). Rubrikk: [lim inn]
3) Holistisk rubrikk (rask evaluering):
Skriv en 4-nivå holistisk rubrikk for "[oppgave]". La hvert nivå observerbart beskrive den generelle karakteren til arbeidet i et enkelt avsnitt. Gevinst: "[gain]". Gi også noteområder.
4) Kalibreringssjekk:
Nedenfor er en rubrikk og elevarbeid. I henhold til rubrikken, oppgi nivået ditt i hvert mål, med begrunnelse. Gi dette som et FORSLAG; Jeg skal gi den endelige karakteren. Merk eventuelle kriterier som fortsatt er uklare. Rubrikk + studie: [lim inn]
Svak forespørsel / Sterk forespørsel
Svak melding:
Skriv en rubrikk for prosjektet.
Ingen oppgave, prestasjon, type, antall kriterier, vekt; En ikke-oppnådd og abstrakt rubrikk vises.
Kraftig ledetekst:
Din rolle: naturfaglærer. Oppgave: «Eleven forsker på en fornybar energikilde og utarbeider en plakat». Mål: "Eleven forklarer arbeidsprinsippet og fordelene med energikilden." 7. klasse. Analytisk rubrikk med 4 kriterier: innholdsnøyaktighet, klarhet i forklaring, bruk av kilder, rekkefølge. Legger til ikke-oppnåelseskriterier. La hvert nivå være observerbart; Summen av vektene er 100.
funksjon
Analytisk rubrikk
holistisk rubrikk
Antall kriterier
Flere, scoret separat
Enkel generell dom
Tilbakemelding
Detaljert, kriteriebasert
Generelt
hastighet
sakte
raskt
best egnet
Prosess/kompetanseutvikling
Rask oversikt
Bidrag av AI
Kriterier + nivåoversikt
Nivå avsnitt utkast
Vanlige feil
- Ikke-oppnåelsestiltak. Å score ting som ikke er relatert til resultatet, for eksempel håndskrift, estetikk og tilgang til materialer, beseirer rettferdighet.
- Abstrakt nivådefinisjon. Definisjoner som "god/rettferdig" fører til inkonsekvens og innvendinger; Bruk observerbar indikator.
- Viser rubrikken senere. Å ikke dele før oppgaven fratar eleven målet.
- Gjør AI-karakteren. AI kan foreslå prøvepoeng, men læreren gir den endelige karakteren; Konsistenskontrollen er lærerens.
- Hopp over kalibrering. Å bruke rubrikken uten å prøve den med casestudier gir overraskende resultater.
Forsiktig: Det er fristende, men risikabelt å gi AI et studentarbeid og si "score" det. Studentarbeid kan inneholde personopplysninger (anonymisere) og AIs poengsum kan være inkonsekvent/partisk. Bruk AI til å FORESLÅ punkter og skissere tilbakemeldinger; Du bestemmer.
Oppsummert
Rubrikk er verktøyet som gjør evaluering transparent, konsistent og forsvarlig. Analytisk rubrikk gir kriteriebasert detaljert tilbakemelding, holistisk rubrikk gir rask generell vurdering. AI utarbeider raskt prestasjonsrelaterte beregninger, konkrete nivådefinisjoner og vekter; Men det er lærerens ansvar å sortere ut ikke-oppnåelseskriterier, gjøre nivåene observerbare, kalibrere dem og gi sluttkarakter. Karakter er en avgjørelse som påvirker eleven; Det er ikke delegert til AI.
Søknadsoppgave
Lag en rubrikk med 4 kriterier med malen "Analytisk rubrikkoversikt" for en ytelsesoppgave du snart skal gi. Fjern eventuelle ikke-oppnåelseskriterier og gjør nivådefinisjoner observerbare. Test deretter konsistens ved å score (eller hypotetiske) 2 prøvestudier med denne rubrikken; Vurder om poengsummene til de to studiene gjenspeiler deres sanne kvaliteter og foreta justeringer av rubrikken din.
sjekkliste
- [ ] Er alle kriterier oppnådd relatert (ingen ikke-oppnåelseskriterier)?
- [ ] Er nivådefinisjonene observerbare og konkrete?
- [ ] Jeg bestemte vektene og summen deres er 100?
- [ ] Vil jeg dele rubrikken med eleven før oppgaven?
- [ ] Kalibrerte jeg rubrikken med prøvearbeidet og ga den endelige karakteren selv?