zisky:
- Schopnosť vytvárať viacnásobný výber, otvorené a vyššie úrovne myslenia v súlade s úspechmi s podporou umelej inteligencie
- Schopnosť kontrolovať kvalitu otázky uplatnením princípov dobrého rozptýlenia (nesprávna, ale prijateľná možnosť), jedna správna odpoveď a obtiažnosť položky.
- Pochopte riziko, že umelá inteligencia vytvorí nesprávne kľúče odpovedí, neobjektívne alebo neobjektívne otázky a budete vedieť, že učiteľ musí každú položku overiť.
Skúšky a kvízy sú hlavnými nástrojmi, ktorými učiteľ meria učenie; Ale napísať dobré otázky je ťažšie, ako si myslíte. Nejednoznačný koreň, podobné možnosti a jazyk poskytujúci vodítko znižujú hodnotu merania otázky. AI rýchlo generuje veľké množstvo náčrtov otázok súvisiacich s výsledkom; Monitorujete kvalitu, overujete kľúč odpovede a udržiavate súlad s dosiahnutím. V tejto časti sa budeme zaoberať dobrým písaním článkov a tvorbou kvalitných kvízov pomocou AI. Limit je jasný: AI môže produkovať nesprávne kľúče odpovedí, neobjektívne alebo neobjektívne otázky; Učiteľ každú položku overí.
Anatómia hmoty a princípy dobrých otázok
Otázka s viacerými možnosťami výberu má dve časti: kmeň (kmeň otázky) – hlavná otázka, ktorá sa kladie; a možnosti — jedna je správna odpoveď, ostatné sú rozptyľovače. Dobrý rozptyľovač, aj keď je nesprávny, sa študentovi, ktorý učivo úplne nezvládol, zdá vierohodný; Vo všeobecnosti je založený na všeobecnej mylnej predstave. Bežná mylná predstava ako „Mesiac produkuje svoje vlastné svetlo“ je silný rušič. Nezmysel alebo irelevantný rušič („Mesiac je syr“) otázku uľahčuje a robí ju menej výraznou.
Princípy dobrých otázok: (1) Kmeň sa pýta niečo jednoduché a jasné; (2) je len jedna správna odpoveď; (3) možnosti majú podobnú dĺžku a sú gramaticky kompatibilné s koreňom (dlhšia možnosť je vo všeobecnosti správna, neposkytujte žiadnu stopu); (4) možnosti „všetky/žiadne“ sa vyhýbajú, ak je to možné; (5) ak je kmeň záporný („nie je“), zvýrazní sa; (6) otázky merajú úroveň dosiahnutého výsledku – kladenie otázok na pripomenutie výsledkov analýzy míňa cieľ.
Obtiažnosť položky je, aká ťažká je otázka; Diskriminácia je, nakoľko táto otázka oddeľuje tých, ktorí vedia, od tých, ktorí nevedia. Dobrá skúška je kombináciou položiek rôznej náročnosti.
Tip: Keď kladiete otázky od AI, pomenujte cieľovú mylnú predstavu: povedzte „rozptyľovače by mali byť založené na týchto 3 bežných mylných predstavách“. Takto získate inštruktážne rozptyľovače, nie náhodné.
Typy otázok
Viacnásobný výber: Rýchle meranie, automaticky hodnotené; ale meranie myslenia vyššieho rádu si vyžaduje starostlivý návrh. Otvorená/krátka odpoveď: Zobrazuje vlastný výrok študenta; Boduje sa rubrikou (6. jednotka). Pravda-nepravda: Rýchly, ale vysoký faktor šťastia. Zhoda: Dobré pre vzťah medzi konceptom a definíciou. Otázky na myslenie vyššieho rádu: Položky založené na scenári, ktoré sa pýtajú „prečo/ako/hodnotiť“; Meria zisky analýzy a hodnotenia. AI vytvára plány pre všetkých; Vašou úlohou je vybrať si, ktorý typ meria ktorý výsledok.
Krok za krokom: Výroba kvízov s AI
- Dajte zisk a úroveň Bloom. Otázka by mala merať túto úroveň.
- Uveďte typ a číslo. "6 viac možností + 2 otvorené".
- Pomenujte stratégiu rozptyľovania. Na akých mylných predstavách by mala byť založená?
- Požiadajte o kľúče a odôvodnenie. Správna odpoveď na každú otázku a prečo sa ostatné mýlia.
- Manuálne overte kľúč. Vyriešte každú otázku sami; Je čiara označená AI skutočne pravdivá?
- Kontrola zarovnania a zaujatosti. Prináša otázka miera zisk? Existuje kultúrna/rodová zaujatosť?
- Rovnováha obtiažnosti. Upravte zmes ľahkého, stredného a tvrdého.
tri mini prípady
Prípad 1 – Nesprávny kľúč. Učiteľ prírodných vied absolvoval kvíz s 10 otázkami z AI. Kľúč k tretej otázke bol označený „B“, ale keď ho učiteľ vyriešil, videl, že správna odpoveď bola „C“ – AI si myslela, že jej vlastný rozptyľovač je správny. Ak by ho učiteľ neopravil, považoval by žiaka, ktorý to vedel, za nesprávneho. Ručné vyriešenie kľúča zachránilo celý kvíz.
Prípad 2 – Slabá korekcia distraktora. V prvom učiteľskom kvíze boli vyrušovače nezmyselné a študenti museli odstrániť a nájsť správnu odpoveď. Nechal AI reprodukovať „rozptyľovače založené na týchto bežných mylných predstavách: X, Y, Z“. V novom kvíze sa zvýšila diskriminácia; priemer triedy lepšie odrážal skutočné učenie.
Prípad 3 – Zosilnenie zarovnania. Výsledok učiteľa dejepisu bol na úrovni analýzy („súvisí s príčinami“), ale AI vytvorila otázky na zapamätanie („povedzte dátum“). Učiteľ aktualizoval výzvu ako „na úrovni akvizičnej analýzy; klaďte scenárové otázky, ktoré vytvárajú vzťah príčina-následok“. Otázky sa stali meradlom úspechu.
Kopírovateľné šablóny
1) Sada viacerých možností na základe úspechu:
Vaša úloha: učiteľ [predmet]. Zisk: „[zisk]“ ([Úroveň kvitnutia]),[X. trieda]. Napíšte 6 otázok s výberom odpovede, ktoré merajú tento výsledok. Každá otázka má 4 možnosti; Nech sú rozptyľovače založené na týchto bežných mylných predstavách: [napíšte mylné predstavy]. Pri každej otázke vysvetlite správnu odpoveď a prečo je KAŽDÁ možnosť pravdivá/nepravdivá v samostatnej kľúčovej časti. Zmiešané ľahké-stredne ťažké.
2) Overenie kľúča odpovede:
Postupne vyriešte nižšie uvedené otázky s viacerými možnosťami. Pre každú otázku: (a) správna odpoveď, ktorú ste našli, (b) dôvod, (c) zodpovedá označenému kľúču. Nezrovnalosti zreteľne označte ako „ROZOR“. Otázky a kľúč: [prilepiť]
3) Otázka vysokej úrovne (scenár):
"[predmet]", [X. trieda], napíšte 3 otázky založené na scenári na úrovni analýzy a hodnotenia. Nechajte každú otázku poskytnúť stručnú situáciu a požiadajte študenta o zdôvodnenie/porovnanie. Nenechajte si to vyriešiť naspamäť. Pridajte vzorové odpovede a tipy na hodnotenie.
4) Audit zaujatosti a súladu:
V nasledujúcich otázkach skontrolujte: rodová/kultúrna/regionálna zaujatosť, nespravodlivá výhoda/nevýhoda určitej skupiny, nevhodný kontext. Označte problematické položky a navrhnite neutrálnu alternatívu. Otázky: [prilepiť]
Slabá výzva / Silná výzva
Slabá výzva:
Napíšte 10 otázok o zlomkoch.
Úroveň, výsledok, typ, stratégia rozptýlenia, žiadny kľúč; Jeho kvalita a zladenie sú ponechané na náhodu.
Výkonná výzva:
Vaša úloha: učiteľ matematiky. Učebný výsledok: „Žiak sčíta dva zlomky s rôznymi menovateľmi“ (aplikácia). 5. trieda. 6 otázok s výberom odpovede, 4 možnosti. Rozptyľovače by mali vychádzať z nasledujúcich mylných predstáv: priame sčítanie čitateľov aj menovateľov, ponechanie konštantného čitateľa a pridanie menovateľa. Pri každej otázke uveďte kľúč a popis možností. Miešajte ľahko-stredne-ťažko.
Typ otázky
Úroveň, ktorú meria
silu
Pozornosť
viacnásobný výber
Akákoľvek úroveň (v závislosti od dizajnu)
Rýchle, automatické skóre
Kvalita distraktora
otvorený koniec
porozumenie tvoriace
originálny výraz
Potrebujete rubriku
pravda-nepravda
zapamätaj si
veľmi rýchlo
Faktor šťastia je vysoký
Na základe scenára
Analýza-hodnotenie
zabraňuje zapamätaniu
Pravopis je náročný, pomáha AI
Časté chyby
- Neoveruje sa kľúč. Najčastejšia a najnespravodlivejšia chyba; AI vytvorí nesprávny kľúč, študent, ktorý to vie, bude obeťou.
- Nezmyselný rozptyľovač. Nepravdepodobná možnosť zjednodušuje otázku zadarmo.
- Nesúlad úrovne zisku. Zapamätávacia otázka na získanie analýzy; míňa cieľ.
- Jazyk, ktorý dáva stopy. Skutočnosť, že najdlhšia/najpodrobnejšia možnosť je vždy správna, učí študentov vzory.
- Prehliadajúca zaujatosť. Známy kontext konkrétnej kultúry/skupiny dáva niektorým študentom nespravodlivú výhodu.
Pozor: Umelá inteligencia niekedy vytvára nejednoznačné otázky, pri ktorých možno viac ako jednu možnosť označiť za „správnu“. Na každú položku odpovedal otázkou "Existuje jediná a nespochybniteľná pravda?" Otestujte to tak, že poviete; V opačnom prípade objasnite koreň.
V súhrne
Dobrá otázka meria úroveň dosiahnutia pomocou jasného kmeňa a pravdepodobných rušivých faktorov. Umelá inteligencia rýchlo generuje veľké množstvo náčrtov otázok, rušivých prvkov a kľúčov, ktoré závisia od akvizície; Ak poviete cieľu mylné predstavy, rozptyľovače budú poučné. Umelá inteligencia však môže produkovať nesprávne kľúče, slabé rušivé prvky, nedostatočnú akvizíciu alebo zaujaté otázky. Vyriešením každej položky overte kľúč, skontrolujte zarovnanie a zaujatosť; Záverečný test patrí učiteľovi.
Aplikačná úloha
Ak chcete získať výsledok, vygenerujte 6 otázok pomocou šablóny „Množina viacerých možností na základe výsledku“; Sami si špecifikujte stratégiu rozptyľovania. Potom vyriešte každú otázku sami a pred použitím šablóny „Overenie kľúča odpovede“ ju porovnajte s kľúčom AI. Opravte všetky nezhody. Nakoniec napíšte verziu scenára, ktorá povýši jednu z otázok na úroveň analýzy.
kontrolný zoznam
- [ ] Pýtal som sa otázky podľa úrovne Bloomovho výsledku vzdelávania?
- [ ] Založil som rozptyľovače na skutočných mylných predstavách?
- [ ] Overil som kľúč ku každej otázke tak, že som ju sám vyriešil?
- [ ] Som si istý, že existuje jediná, nesporne správna odpoveď?
- [ ] Skontroloval som zaujatosť a primeranosť veku?