zisky:
- Schopnost nechat umělou inteligenci vytvářet otázky s více možnostmi výběru, rozptylovače založené na typických chybách a klíče řešení zadáním tématu, úrovně a rozložení obtížnosti.
- Schopnost zachytit nesprávný klíč a vícenásobné/nulové správné chyby možností nezávislým ověřením každého klíče otázky a odpovědi, nejlépe hromadně, pomocí SymPy
- Schopnost vyhodnotit kvalitu distraktorů, jednoznačnost a vyváženost obtížnosti otázek a schválit každou otázku před složením zkoušky.
Příprava otázek ke zkoušce a procvičování je jedním z časově nejnáročnějších úkolů ve výuce matematiky: stanovení otázek přiměřené obtížnosti, navrhování věrohodných rozptylovačů (špatné, ale věrohodné možnosti), příprava klíče odpovědí a vyvážení obtížnosti zabere hodiny. Umělá inteligence může tento proces urychlit — generování desítek variant otázek, možností s více možnostmi a klíčů řešení z jednoho tématu. Ale přesnost každé vytvořené otázky a bezchybnost každého klíče odpovědi musí být nezávisle ověřeny; Nesprávný klíč znamená, že studenti nespravedlivě ztrácejí body. V této lekci se naučíte, jak používat umělou inteligenci jako partnera pro generování otázek a jak moderovat každou otázku.
Několik definic. Distraktor je možnost v otázce s výběrem odpovědí, která není správná, ale odpovídá běžné chybě, kterou student může udělat. Dobrý rozptylovač není náhodný; Odráží typickou chybu (chyba znaménka, záměna pravidel). Klíč odpovědí je seznam správných odpovědí na otázky. Vyvážení obtížnosti je vhodné rozložení lehkých až středně těžkých otázek ve zkoušce.
Příspěvek umělé inteligence k vytváření otázek
- Obměna otázky: Více podobných otázek ze vzoru (změna čísel).
- Distractor design: Pravděpodobně nesprávné volby založené na běžných chybách.
- Přehled klíče řešení: Řešení každého problému krok za krokem.
- Hodnocení obtížnosti: Klasifikace otázek jako snadné/střední/obtížné.
- Předmětové pokrytí: Soubory otázek pokrývajících různá dílčí témata osnovy.
- Bloom taxonomy fit: Otázka podle kognitivních úrovní, jako je zapamatování, aplikace, analýza.
Krok za krokem: generování spolehlivé sady otázek
1. Určete téma, úroveň a počet otázek. Jako "10. třída střední školy, kvadratické rovnice, 10 otázek s výběrem odpovědí."
2. Zeptejte se na typ otázky a rozdělení obtížnosti. Požádejte o distribuci jako "4 snadné, 4 střední, 2 těžké."
3. Vyřešte každou otázku samostatně. Vyřešte každou otázku sami nebo pomocí SymPy; Porovnejte jej s odpovědí poskytnutou YZ. Tento krok je nesmlouvavý.
4. Zkontrolujte, zda nemáte rušivé prvky. Jsou špatné možnosti opravdu špatné? Někdy AI vytvoří více než jednu správnou možnost nebo je ve skutečnosti správný rozptylovač. Zaškrtněte každou možnost.
5. Garantujte, že existuje právě jedna správná odpověď. Při vícenásobném výběru musí být správná právě jedna možnost; Nesmí být žádná nula nebo více než jedna správná.
6. Zkontrolujte nejistotu a duplicitu. Je otázka jednoznačná? Měří obě otázky totéž? Jsou čísla rozumná (např. pokud má být odmocnina záporná)?
Pozor: AI dělá dvě nejčastější chyby při generování otázek s výběrem odpovědí: (1) možnost, kterou označila jako „pravda“, je ve skutečnosti špatná, (2) správná je více než jedna možnost nebo žádná z nich není správná. Nepoužívejte žádnou otázku, aniž byste každou otázku vyřešili samostatně a nevyhodnotili každou ze čtyř možností samostatně jako pravda/nepravda.
Otázka kontroly kvality
ovládání
Otázka
co hledat
přesnost
Je klíč odpovědí správný?
Potvrzení nezávislým řešením
pouze pravda
Je správná pouze 1 možnost?
Ostatní 3 musí být špatně
Kvalita distraktoru
Jsou chyby věrohodné?
Mělo by být založeno na typické chybě
Jasnost
Je otázka jednoznačná?
Neměla by existovat žádná nejistota
Úroveň souladu
Je obtížnost přiměřená cíli?
Ani příliš snadné, ani příliš obtížné
Rozsah
Je téma dobře zastoupeno?
Dílčí témata jsou vyvážená
tři mini pouzdra
Případ 1 — Špatný klíč. Učitel vytvořil sadu 12 otázek s možností výběru. Když vyřešil každou otázku pomocí SymPy, zjistil, že ve 3 z 12 otázek byla možnost, kterou AI označila jako „správná“, nesprávná – skutečná správná odpověď byla další možností. Učitel narovnal klíče. Pokud by byla tato sada použita bez ověření, byla by celá třída ve 3 otázkách hodnocena nespravedlivě.
Případ 2 – Dvě správné možnosti. V jedné otázce AI vložila jak „x = 2“, tak „x = 2 nebo x = −2“; Obojí bylo v jistém smyslu pravdivé a otázka byla nejasná. Učitel přerovnal možnosti a nechal pouze jednu správnou odpověď. Distraktory musí být zjevně nesprávné.
Případ 3 – Slabý distraktor. Ve strojírenské třídě umělá inteligence umístila do otázky irelevantní rušivé elementy jako „42“, „aksaray“, „modrá“, „17“ atd.; Správná odpověď byla zjevně „17“. Učitel požádal o numerické distraktory založené na typických chybách výpočtu (např. hodnota vyplývající z chyby znaménka) a otázky se staly skutečnými diskriminátory. Dobrý rozptylovač představuje skutečnou falešnou cestu.
Čtyři kopírovatelné šablony
1) Sada otázek s výběrem z více možností:
Vygenerujte [n] MULTIPLE CHOICE otázek na [téma]. Úroveň: [úroveň]. Obtížnost: [x snadné, y střední, z těžké]. Každá otázka má 4 možnosti; Nechť je PŘESNÁ 1 správná a ostatní 3 jsou věrohodné rozptylovače založené na typických chybách. U každé otázky také napište krok za krokem řešení a správnou odpověď. Všechny je ověřím pomocí SymPy.
2) Obměna otázky (od vzoru):
Berte tuto otázku jako VZOR: [ukázková otázka]. Vygenerujte [n] různých verzí měřících stejný koncept, ale s různými čísly/kontextem. Vyřešte odpovědi pro každou verzi krok za krokem. Ať se odpovědi od sebe liší.
3) Generování klíče řešení:
Vytvořte řešení KROK ZA KROKEM a konečnou odpověď na každou z níže uvedených otázek. Zadejte pravidlo, které používáte. Označte řešení, kterým si nejste jisti; Každou odpověď si nezávisle ověřím. Otázky: [zde]
4) Zlepšení rozptylovače:
Projděte si rozptylovače pro tuto otázku s výběrem odpovědí. Vysvětlete, KTERÉ typické žákovské chybě odpovídá každý nesprávný distraktor. Nahraďte irelevantní nebo zjevně nesprávné rozptylovače těmi, které jsou založeny na skutečných chybách. Otázka: [zde]
Slabá výzva / Silná výzva
Slabý: "Dejte mi 10 odvozených otázek."
Výsledek: Nejistá úroveň, náhodné rozdělení obtížnosti, neověřený klíč odpovědi, náhodná sada rozptylovačů (pokud existují).
Strong: "Vyrobte 10 odvozených otázek s výběrem odpovědí pro 12. třídu střední školy: 4 snadné (základní pravidla), 4 střední (pravidlo řetězce/součinu), 2 obtížné (složené funkce). Nechť jsou v každé otázce 4 možnosti, přesně 1 správná, ostatní jsou rozptylovače založené na typických chybách (zapomenutí vnitřní derivace, chyba znaménka). Vyřešte každou otázku krok za krokem a označte správnou odpověď."
Výsledek: Sada, která je vyrovnaná, vyvážená, rozptylující prvky jsou smysluplné a každá odpověď je auditovatelná.
Časté chyby
- Neověřuje se klíč odpovědi. To, co AI říká, že je „správné“, je často špatné; Každou otázku řešte samostatně.
- Více než jedna/nula je správná volba. Ve vícenásobném výběru musí být přesně jedna pravda; Zaškrtněte každou možnost zvlášť.
- Slabé rozptylovače. Irelevantní nebo zjevně nesprávné možnosti činí otázku nerozlišitelnou.
- Bez určení rozložení obtížnosti. Zdá se, že všechny mají stejnou obtížnost; Hodnocení úrovně nelze provést.
- Opakování a překrývání. Různé otázky mohou měřit stejný koncept; Zkontrolujte zůstatek pokrytí.
- Nejasný výraz. Otázky s dvojím významem nespravedlivě uvádějí studenty v omyl.
Tip: Nejúčinnějším způsobem, jak ověřit sadu otázek, je napsat kód, který vyřeší všechny otázky najednou pomocí SymPy. Řekněte AI „napište kód, který vyřeší každý z těchto 10 problémů pomocí SymPy“, spusťte kód a hromadně porovnejte výsledky SymPy s odpovědí AI. Tímto způsobem kontrolujete 10 otázek nikoli jednu po druhé, ale hromadně a deterministicky.
V souhrnu
Umělá inteligence dramaticky urychluje generování matematických otázek a zkoušek: variace otázek, design rozptylovače, klíč řešení, hodnocení obtížnosti. Ale každá otázka a každý klíč odpovědi musí být nezávisle ověřeny – nejlépe hromadně ověřeny pomocí SymPy. Nejčastějšími chybami jsou nesprávný klíč odpovědi, vícenásobné/nulové správné možnosti a slabé rozptylovače. Zadáním tématu, úrovně a rozložení obtížnosti od začátku se zvyšuje kvalita. Žádné neověřené otázky by neměly být součástí zkoušky.
Aplikační úkol
Vyberte téma. Nechte AI vytvořit 8–10 otázek s výběrem odpovědí + řešení s určitým rozložením obtížnosti s 1. šablonou. Poté, co si pamatujete z jednotky 4, nechte AI napsat kód, který vyřeší všechny otázky pomocí SymPy, a spusťte kód. Porovnejte výsledky SymPy s odpovědí YZ. Ověřte, že v každé otázce je přesně jedna správná volba a že rozptylovače jsou ve skutečnosti nesprávné. Najděte a opravte alespoň jednu chybu nebo slabý rozptylovač.
kontrolní seznam
- [ ] Jasně jsem uvedl předmět, úroveň a rozložení obtížnosti.
- [ ] Každou otázku jsem řešil samostatně (nejlépe dávkově se SymPy).
- [ ] Porovnal jsem klíč odpovědi s výsledky SymPy.
- [ ] Ověřil jsem si, že v každé otázce je právě jedna správná možnost.
- [ ] Zkontroloval jsem, že distraktory byly založeny na typických chybách a ve skutečnosti byly špatné.
- [ ] Ujistil jsem se, že tam nebudou žádná vágní prohlášení a žádné opakující se otázky.