Birlik 6 / 11

O'lchov-baholash va rubrikani loyihalash: mezon, daraja va izchillik

Daromadlar:

  • Analitik va yaxlit rubrikalar turlari, mezonlari va muvaffaqiyat darajasi tushunchalarini tushunish va sun'iy intellekt yordamida shaffof rubrikani loyihalash qobiliyati.
  • Ishlash topshirig'i, portfel va loyihani baholash uchun yutuqlarga moslashtirilgan ko'rsatkichlar va nuqta og'irliklarini ishlab chiqish qobiliyati.
  • Baho va yakuniy baholash qarori o'qituvchiga tegishli ekanligini, sun'iy intellekt faqatgina ball qo'ymasligini va izchillik o'qituvchi tomonidan tekshirilishi kerakligini tushunish qobiliyati.

Talabaga “bu loyiha 70 ball oldi” deyish oson; lekin talaba "nega 70?" deb so'raydi. yoki ota-ona ob'ektlari, siz adolatli va himoyalanadigan asosga ega bo'lishingiz kerak. Ushbu asos bo'lib rubrikalardir: qanday mezonlar va qanday darajalarda ishlash (loyiha, kompozitsiya, taqdimot, portfel) baholanishini oldindan ko'rsatadigan ballni baholash vositasi. Yaxshi rubrika talabaga "sizdan nima kutilayotganini" aytadi va o'qituvchining ballini izchil va shaffof qiladi. AI tezda erishish bilan bog'liq ko'rsatkichlar va daraja ta'riflarini ishlab chiqadi; Siz hizalanish, adolat va og'irliklarni aniqlaysiz. Chegara aniq: Baholash va yakuniy baholash - bu talabaga ta'sir qiladigan qaror; Mas'uliyat va yakuniy tasdiqlash o'qituvchiga tegishli. AI yolg'iz gol ololmaydi.

Rubrik turlari va komponentlari

Ikkita asosiy tur mavjud. Tahliliy rubrikada ishlash ko'rsatkichlarini alohida mezonlarga ajratadi - masalan, "mazmun", "tashkilot", "til va ifoda", "yozuv" inshoda - va har bir mezon bo'yicha yutuqning alohida darajalarida baholanadi (masalan, 4=juda yaxshi, 3=yaxshi, 2=yaxshilash, 1=boshlash). Batafsil fikr-mulohazalarni taqdim etadi, lekin tayyorgarlik ko'rish va baholash uchun vaqt kerak bo'ladi. Yaxlit rubrika butun tadqiqotga yagona umumiy daraja beradi; Bu tez, lekin qayerda kamligini ko'rsatmaydi.

Analitik rubrikaning tarkibiy qismlari quyidagilardan iborat: mezonlar (biz nimani baholaymiz), darajalar (qanchalik yaxshi), har bir hujayraning darajani aniqlash (bu darajaning aniq ko'rsatkichi) va og'irliklar (qaysi mezon ballning necha foizi). Yaxshi darajaning ta'rifi kuzatilishi mumkin: "yaxshi yozilgan" emas, balki "mantiqiy tartibda 2 ta xat va paragrafdan ko'p bo'lmagan".

Maslahat: rubrikani topshiriqdan oldin talaba bilan baham ko'ring. Rubrik kutilmagan eslatma vositasi emas, balki o'rganish xaritasi; Agar talaba nima ustida ishlashni bilsa, u yaxshiroq mahsulot ishlab chiqaradi.

Muvofiqlik va adolatlilik

Rubrikaning haqiqiy qiymati izchillikdir: agar ikkita o'qituvchi bir xil ishni ikki xil vaqtda baholasa, natija bir xil bo'lishi kerak. Bunga baholovchining ishonchliligi deyiladi. AI rubrikalar rejasini ishlab chiqishi mumkin, ammo o'qituvchi izchillikni ta'minlaydi: o'qituvchining vazifasi daraja tavsiflarini etarlicha aniqlashtirish, rubrikalar bilan bir nechta amaliy ishlarni "kalibrlash" (sinov balli) va chegaraviy holatlarda qoidani aniqlashtirishdir.

Adolat nuqtai nazaridan, rubrikada natijaga bog'liq bo'lmagan narsalarni (qo'l yozuvining go'zalligi, talaba ijtimoiy-iqtisodiy kirishi kerak bo'lgan material) baholamaslik kerak. AI ba'zida "taqdimot estetikasi" kabi erishilmaydigan mezonlarni qo'shadi; Ularni tartibga solish kerak.

Bosqichma-bosqich: AI bilan rubrik dizayni

  1. Vazifa va yutuqni bering. Rubrika nimani o'lchashi qaysi natijaga bog'liq.
  2. Janrni tanlang. Agar siz batafsil fikr-mulohazalarni istasangiz, tahliliy; Agar siz tez umumiy fikrni xohlasangiz, yaxlit.
  3. Mezonlarni so'rang, lekin ularni filtrlang. Muvaffaqiyatga oid 3-5 mezon; ahamiyatsizlarini olib tashlang.
  4. Konkret darajadagi ta'riflar. Kuzatiladigan ko'rsatkichlarni so'rang.
  5. Og'irlikni yo'qotish. Qaysi mezon muhimroq? Jami 100 bo'lsin.
  6. Kalibrlash. Rubrikalar va test izchilligi bilan 1-2 ta namunaviy tadqiqotlarni baholang.
  7. Yakuniy qarorni qabul qiling. AI namunali ballni taklif qilsa ham, o'qituvchi yakuniy bahoni qo'yadi.

uchta mini holat

1-holat - Erishmaslik mezonini chiqarish. Turk o'qituvchisi AIdan insho uchun analitik rubrikani so'radi. AI 5 ta mezonni taklif qildi, ammo biri "qo'l yozuvi go'zalligi" edi - bu mezon natija uchun ahamiyatsiz edi va qo'l yozuvi rivojlanmagan talabani adolatsiz jazoladi. O‘qituvchi uni chiqarib, o‘rniga “g‘oyani rivojlantirish” deb qo‘ydi. Rubrika ham adolatli, ham muvaffaqiyatga mos edi.

2-holat — konkretlashtirish. Bir o'qituvchining birinchi rubrikasida darajalar mavhum edi, masalan, "juda yaxshi / yaxshi / adolatli"; Ikki talaba bir-biriga o'xshash ishlarni turli darajadagi bajargan. U AIga "har bir darajani kuzatilishi mumkin bo'lgan ko'rsatkich bilan qayta yozishni" aytdi. "Yaxshi = kamida 3 ta misol va aniq xulosa paragrafi" kabi aniq ta'riflar kelganda, izchillik ortdi va e'tirozlar kamaydi.

3-holat — kalibrlash. Loyihani baholashda o'qituvchi birinchi navbatda AI tomonidan ishlab chiqarilgan rubrika bilan 3 ta namunaviy loyihaga ball qo'ydi. AI kimgadir 85 taklif qildi; O'qituvchi xuddi shu loyihani 72-rubrikani topdi, chunki AI bitta mezonni juda saxovatli talqin qilgan. O'qituvchi daraja tavsifiga aniqlik kiritdi va yakuniy baholarni o'zi qo'ydi. AI qoralamani tezlashtirdi; O'qituvchi qaror qildi.

Nusxalanadigan shablonlar

1) Analitik rubrikaning konturi:

Sizning rolingiz: [mavzu] o'qituvchisi. Vazifa: "[ishlash vazifasini yozish]", yutuq: "[yutuq]", [X. sinf]. 4 ta mezondan iborat analitik rubrikani yarating. Har bir mezon natija bilan bog'liq bo'lsin (qo'l yozuvi va estetika kabi ob'ektiv bo'lmagan mezonlarni qo'shing). Har bir daraja uchun 4 ta muvaffaqiyat darajasini va KO'ZILASH ko'rsatkichini yozing. Mezonlarni torting, shunda jami 100 ta bo'lsin.

2) Konkretlashtiruvchi darajadagi ta'riflar:

Quyidagi rubrikaning daraja tavsiflari juda mavhum ("yaxshi", "adolatli"). Har bir darajani kuzatilishi mumkin bo'lgan, sanaladigan ko'rsatkichlar bilan qayta yozing (masalan, "2 tadan ko'p xato", "kamida 3 ta misol"). Rubrika: [qo'yish]

3) Yaxlit rubrikka (tezkor baholash):

“[topshiriq]” uchun 4 darajali yaxlit rubrikani yozing. Har bir daraja ishning umumiy mohiyatini bir paragrafda kuzatilishi mumkin bo'lsin. Daromad: "[daromad]". Shuningdek, eslatma oralig'ini bering.

4) kalibrlash tekshiruvi:

Quyida rubrika va talabalar ishi keltirilgan. Rubrikaga ko'ra, har bir o'lchovda o'z darajangizni asoslab bering. Buni TAKLIF sifatida bering; Yakuniy bahoni qo'yaman. Noaniq qolgan mezonlarni belgilang. Rubrika + o'rganish: [qo'yish]

Zaif taklif / Kuchli taklif

Zaif taklif:

Loyiha uchun rubrika yozing.

Vazifa, yutuq, tur, mezon soni, vazni yo'q; Erishmagan va mavhum rubrika paydo bo'ladi.

Kuchli so'rov:

Sizning rolingiz: fan o'qituvchisi. Vazifa: “Talaba qayta tiklanadigan energiya manbasini tadqiq qiladi va plakat tayyorlaydi”. Maqsad: "Talaba energiya manbasining ishlash printsipi va afzalliklarini tushuntiradi". 7-sinf. 4 mezonga ega analitik rubrika: mazmunning aniqligi, tushuntirishning aniqligi, manbalardan foydalanish, tartib. Erishmaganlik mezonlarini qo'shish. Har bir daraja kuzatilishi mumkin bo'lsin; Og'irliklar yig'indisi 100 ga teng.

xususiyat

Analitik rubrika

yaxlit rubrika

Mezonlar soni

Ko'p, alohida ball

Yagona umumiy hukm

Fikr-mulohaza

Batafsil, mezonlarga asoslangan

General

tezlik

sekin

tez

eng mos

Jarayon / ko'nikmalarni rivojlantirish

Tezkor ko'rib chiqish

AIning hissasi

Mezon + daraja sxemasi

Darajali paragraf loyihasi

Umumiy xatolar

  • Erishmaganlik o'lchovi. Natijaga bog'liq bo'lmagan narsalarni, masalan, qo'l yozuvi, estetika va materiallarga kirish huquqini baholash adolatni buzadi.
  • Abstrakt daraja ta'rifi. "Yaxshi/adolatli" kabi ta'riflar nomuvofiqlik va e'tirozga olib keladi; Kuzatiladigan indikatordan foydalaning.
  • Rubrika keyinroq ko'rsatiladi. Vazifadan oldin baham ko'rmaslik talabani maqsaddan mahrum qiladi.
  • AI darajasini yaratish. AI namunali ballarni taklif qilishi mumkin, ammo o'qituvchi yakuniy bahoni qo'yadi; Muvofiqlikni nazorat qilish o'qituvchiga tegishli.
  • Kalibrlashni o'tkazib yuborish. Rubrikani amaliy tadqiqotlar bilan sinab ko'rmasdan foydalanish hayratlanarli natijalarga olib keladi.
Diqqat: AIga talaba ishini berish va uni "bal" deb aytish jozibali, ammo xavfli. Talabalar ishi shaxsiy maʼlumotlarni oʻz ichiga olishi (anonimlashtirish) va AI balli nomuvofiq/noxolis boʻlishi mumkin. Nuqtalarni taklif qilish va fikr-mulohazalarni belgilash uchun AIdan foydalaning; Siz qaror qilasiz.

qisqa bayoni; yakunida

Rubrik - bu baholashni shaffof, izchil va himoyalangan qiladigan vositadir. Analitik rubrika mezonlarga asoslangan batafsil fikr-mulohazalarni taqdim etadi, yaxlit rubrika tez umumiy xulosani beradi. AI tezda muvaffaqiyatga oid ko'rsatkichlar, aniq darajadagi ta'riflar va og'irliklarni tuzadi; Lekin o‘rganilmaganlik mezonlarini saralash, darajalarni kuzatish mumkin bo‘lishi, ularni kalibrlash va yakuniy baho qo‘yish o‘qituvchining zimmasidadir. Baho - bu talabaga ta'sir qiladigan qaror; U AIga topshirilmagan.

Ilova vazifasi

Tez orada topshiriladigan bajarish topshirig‘i uchun “Analitik rubrikalar konturi” shabloniga ega 4 mezonli rubrikani yarating. Har qanday erishilmagan mezonlarni olib tashlang va daraja ta'riflarini kuzatiladigan qilib qo'ying. Keyin (yoki gipotetik) 2 ta namunaviy tadqiqotni ushbu bo'lim bilan baholab, izchillikni tekshiring; Ikki tadqiqotning ballari ularning haqiqiy fazilatlarini aks ettiradimi yoki yo'qligini baholang va rubrikangizga tuzatishlar kiriting.

nazorat ro'yxati

  • [ ] Barcha mezonlarga erishish bog'liqmi (etishmaslik mezonlari yo'q)?
  • [ ] Daraja ta'riflari kuzatilishi mumkin va aniqmi?
  • [ ] Men og'irliklarni aniqladim va ularning yig'indisi 100 ga tengmi?
  • [ ] Vazifadan oldin rubrikani talaba bilan baham ko'ramanmi?
  • [ ] Namunaviy ish bilan rubrikani sozlab, yakuniy bahoni oʻzim qoʻyganmanmi?