zisky:
- Schopnost generovat více možností, otevřené a vyšší úrovně myšlení v souladu s úspěchy s podporou umělé inteligence
- Schopnost kontrolovat kvalitu otázky uplatněním principů dobrého rozptýlení (špatná, ale pravděpodobná možnost), jediné správné odpovědi a obtížnosti položky.
- Pochopte riziko, že umělá inteligence vytvoří nesprávné klíče odpovědí, neobjektivní nebo zaujaté otázky, a buďte schopni vidět, že učitel musí každou položku ověřit.
Zkoušky a kvízy jsou primárními nástroji, kterými učitel měří učení; Ale napsat dobré otázky je těžší, než si myslíte. Nejednoznačný kořen, podobné možnosti a jazyk poskytující vodítko snižují měrnou hodnotu otázky. Umělá inteligence rychle generuje velké množství obrysů otázek souvisejících s výsledkem; Sledujete kvalitu, ověřujete klíč odpovědí a udržujete soulad dosažených výsledků. V této jednotce se budeme zabývat dobrým psaním článků a tvorbou kvalitních kvízů pomocí AI. Limit je jasný: AI může produkovat nesprávné klíče odpovědí, neobjektivní nebo neobjektivní otázky; Učitel každou položku ověří.
Anatomie hmoty a principy dobrých otázek
Otázka s výběrem odpovědí má dvě části: kmen (kmen otázky) – hlavní otázka, na kterou se klade; a možnosti – jedna je správná odpověď, ostatní jsou rozptylující. Dobrý rozptylovač, i když je špatný, se studentovi, který předmět plně nezvládl, jeví jako přijatelný; Obecně je založen na běžné mylné představě. Obvyklá mylná představa jako „Měsíc produkuje své vlastní světlo“ je mocný rozptylovač. Nesmysl nebo irelevantní rozptylovač („Měsíc je sýr“) otázku usnadňuje a činí ji méně výraznou.
Principy dobrých otázek: (1) Kmen se ptá na něco jednoduchého a jasného; (2) existuje pouze jedna správná odpověď; (3) možnosti mají podobnou délku a jsou gramaticky kompatibilní s odmocninou (delší možnost je obecně správná, neposkytujte žádné vodítko); (4) Pokud je to možné, vyhýbejte se možnostem „vše/žádné“; (5) pokud je kmen záporný („není“), je zdůrazněn; (6) otázky měří úroveň dosažených výsledků – kladení otázek na připomenutí výsledků analýzy se míjí účinkem.
Obtížnost položky je, jak obtížná otázka je; Diskriminace je, jak moc tato otázka odděluje ty, kteří vědí, od těch, kteří nevědí. Dobrá zkouška je kombinací položek různé obtížnosti.
Tip: Když pokládáte otázky od AI, pojmenujte cílovou mylnou představu: řekněte „distraktory by měly být založeny na těchto 3 běžných mylných představách“. Tímto způsobem získáte instruktážní rozptylovače, nikoli náhodné.
Typy otázek
Více možností: Rychlé měření, automaticky hodnocené; ale měření myšlení vyššího řádu vyžaduje pečlivý návrh. Otevřená/krátká odpověď: Zobrazuje vlastní výrok studenta; Boduje se rubrikou (6. jednotka). Pravda-nepravda: Rychlý, ale vysoký faktor štěstí. Shoda: Dobré pro vztah mezi konceptem a definicí. Otázky k myšlení vyššího řádu: Položky založené na scénáři, které se ptají „proč/jak/hodnotit“; Měří zisky analýzy a hodnocení. AI vytváří plány pro všechny; Vaším úkolem je vybrat, který typ měří který výsledek.
Krok za krokem: Výroba kvízů s umělou inteligencí
- Dejte zisk a úroveň Bloom. Otázka by měla měřit tuto úroveň.
- Uveďte typ a číslo. "6 více možností + 2 otevřené".
- Pojmenujte strategii rozptylování. Na jakých mylných představách by měla být založena?
- Požádejte o klíče a odůvodnění. Správná odpověď na každou otázku a proč se ostatní mýlí.
- Ověřte klíč ručně. Vyřešte každou otázku sami; Je čára označená AI skutečně pravdivá?
- Kontrola vyrovnání a vychýlení. Získává otázka míra zisk? Existuje kulturní/genderová zaujatost?
- Bilance obtížnosti. Upravte směs lehké-středně-tvrdé.
tři mini pouzdra
Případ 1 — Špatný klíč. Učitel přírodovědných předmětů provedl kvíz s 10 otázkami z AI. Klíč ke 3. otázce byl označen „B“, ale když to učitel vyřešil, viděl, že správná odpověď byla „C“ – AI se domnívala, že její vlastní rozptylovač je správný. Kdyby ho učitel neopravil, považoval by žáka, který to věděl, za špatného. Ruční vyřešení klíče zachránilo celý kvíz.
Případ 2 – Slabá korekce distraktoru. V prvním učitelském kvízu byly rozptylovače nesmyslné a studenti museli odstranit a najít správnou odpověď. Nechal AI reprodukovat „distraktory založené na těchto běžných mylných představách: X, Y, Z“. V novém kvízu vzrostla diskriminace; třídní průměr lépe odrážel skutečné učení.
Případ 3 – Zisk zarovnání. Výsledek učitele dějepisu byl na úrovni analýzy („souvisí s příčinami“), ale umělá inteligence vytvořila otázky na vyvolání („sdělte datum“). Učitel aktualizoval výzvu jako „na úrovni akviziční analýzy; pokládejte otázky scénáře, které vytvářejí vztah příčiny a následku“. Otázky se staly měřítkem úspěchu.
Kopírovatelné šablony
1) Sada s více možnostmi na základě úspěchu:
Vaše role: [předmět] učitel. Zisk: "[zisk]" ([Úroveň květu]),[X. třída]. Napište 6 otázek s výběrem odpovědí, které měří tento výsledek. Každá otázka má 4 možnosti; Ať jsou rozptylovače založeny na těchto běžných mylných představách: [napište mylné představy]. U každé otázky vysvětlete správnou odpověď a proč je KAŽDÁ možnost pravdivá/nepravdivá v samostatné klíčové sekci. Smíšené lehké-středně těžké.
2) Ověření klíče odpovědi:
Postupně vyřešte níže uvedené otázky s výběrem odpovědí. U každé otázky: (a) správná odpověď, kterou jste našli, (b) důvod, (c) odpovídá označenému klíči. Nesrovnalosti zřetelně označte jako „PROTI“. Otázky a klíč: [vložit]
3) Otázka na vysoké úrovni (scénář):
"[předmět]", [X. třída], napište 3 otázky založené na scénáři na úrovni analýzy a hodnocení. U každé otázky nechte stručnou situaci a požádejte studenta o zdůvodnění/srovnání. Nenechte to řešit zpaměti. Přidejte vzorové odpovědi a tipy pro hodnocení.
4) Audit zkreslení a souladu:
V následujících otázkách zkontrolujte: genderová/kulturní/regionální zaujatost, nespravedlivá výhoda/nevýhoda pro určitou skupinu, nevhodný kontext. Označte problematické položky a navrhněte neutrální alternativu. Otázky: [vložit]
Slabá výzva / Silná výzva
Slabá výzva:
Napište 10 otázek o zlomcích.
Úroveň, výsledek, typ, strategie rozptylování, žádný klíč; Jeho kvalita a sladění jsou ponechány náhodě.
Výkonná výzva:
Vaše role: učitel matematiky. Výstup z učení: "Žák sečte dva zlomky s různými jmenovateli" (aplikace). 5. třída. 6 otázek s výběrem odpovědí, 4 možnosti. Distraktory by měly být založeny na následujících mylných představách: přímé sčítání čitatelů i jmenovatelů, udržování konstantního čitatele a přidávání jmenovatele. U každé otázky uveďte klíč a popis možností. Mix snadné-středně těžké.
Typ otázky
Úroveň, kterou měří
sílu
Pozor
více možností
Jakákoli úroveň (v závislosti na designu)
Rychlé, automatické skóre
Kvalita distraktoru
otevřený konec
porozumění-vytvářející
originální výraz
Potřebujete rubriku
pravda-nepravda
pamatovat si
velmi rychle
Faktor štěstí je vysoký
Na základě scénáře
Analýza-hodnocení
zabraňuje zapamatování
Pravopis je obtížný, AI pomáhá
Časté chyby
- Bez ověření klíče. Nejčastější a nejvíce nespravedlivá chyba; Umělá inteligence vytvoří špatný klíč, student, který to ví, bude obětí.
- Nesmyslný rozptylovač. Nepravděpodobná možnost zjednoduší otázku zdarma.
- Nesoulad úrovně zisku. Pamatovací otázka pro získání analýzy; mine cíl.
- Jazyk, který dává vodítka. Skutečnost, že nejdelší/nejpodrobnější možnost je vždy správná, učí studenta vzory.
- Přehlížející zaujatost. Známý kontext konkrétní kultury/skupiny dává některým studentům nespravedlivou výhodu.
Pozor: Umělá inteligence někdy vytváří nejednoznačné otázky, kde lze více než jednu možnost označit za „správnou“. Na každou položku odpověděl otázkou "Existuje jediná a nezpochybnitelná pravda?" Otestujte to tím, že řeknete; V opačném případě ujasněte kořen.
V souhrnu
Dobrá otázka měří úroveň dosažených výsledků pomocí jasného kmene a věrohodných distraktorů. Umělá inteligence rychle generuje velké množství osnov otázek, rozptylovačů a klíčů, které závisí na akvizici; Pokud cíli sdělíte mylné představy, distraktory budou poučné. Umělá inteligence však může vytvářet nesprávné klíče, slabé rušivé prvky, nedostatečnou akvizici nebo zaujaté otázky. Vyřešte každou položku, abyste ověřili klíč, zkontrolujte zarovnání a vychýlení; Závěrečný test je na učiteli.
Aplikační úkol
Chcete-li získat výsledek, vygenerujte 6 otázek pomocí šablony „Sada více možností na základě výsledku“; Sami si určete strategii rozptylování. Poté si každou otázku vyřešte sami a porovnejte ji s klíčem AI, než použijete šablonu „Ověření klíče odpovědi“. Opravte případné neshody. Nakonec napište verzi scénáře, která povýší jednu z otázek na úroveň analýzy.
kontrolní seznam
- [ ] Položil jsem otázky podle úrovně Bloom ve výsledcích učení?
- [ ] Založil jsem rozptylovače na skutečných mylných představách?
- [ ] Ověřil jsem klíč ke každé otázce tak, že jsem ji sám vyřešil?
- [ ] Jsem si jistý, že existuje jediná, nepochybně správná odpověď?
- [ ] Zkontroloval jsem zaujatost a přiměřenost věku?