Klausimų ir viktorinos gamyba: elementų rašymas ir trikdžių kokybė

Pelnas:

• Gebėjimas generuoti kelių pasirinkimų, atvirojo tipo ir aukštesnio lygio mąstymo klausimus, atitinkančius pasiekimus naudojant dirbtinio intelekto palaikymą
• Gebėjimas kontroliuoti klausimo kokybę taikant gero blaškiklio (neteisingas, bet tikėtinas variantas), vieno teisingo atsakymo ir punkto sunkumo principus.
• Supraskite riziką, kai dirbtinis intelektas pateikia neteisingus atsakymų raktus, neobjektyvius ar šališkus klausimus, ir suvokite, kad mokytojas turi patikrinti kiekvieną elementą.

Egzaminai ir viktorinos yra pagrindinės priemonės, kuriomis mokytojas matuoja mokymąsi; Tačiau rašyti gerus klausimus yra sunkiau, nei manote. Dviprasmiška šaknis, panašios parinktys ir užuominų kalba sumažina klausimo matavimo vertę. AI greitai sukuria daugybę su rezultatais susijusių klausimų kontūrų; Jūs stebite kokybę, tikrinate atsakymo raktą ir palaikote pasiekimų suderinimą. Šiame skyriuje apžvelgsime gerą straipsnių rašymą ir kokybišką viktorinos kūrimą naudojant AI. Riba aiški: dirbtinis intelektas gali pateikti neteisingus atsakymų raktus, neobjektyvius ar šališkus klausimus; Mokytojas patikrina kiekvieną elementą.

Medžiagos anatomija ir gerųjų klausimų principai

Klausimas su keliais pasirinkimais susideda iš dviejų dalių: kamieno (klausimo kamieno) – pagrindinio klausimo; ir variantai – vienas yra teisingas atsakymas, kiti – trukdo. Geras blaškytojas, nors ir neteisingas, ne iki galo dalyko įsisavinusiam mokiniui atrodo tikėtinas; Paprastai jis grindžiamas paplitusia klaidinga nuomone. Įprasta klaidinga nuomonė, pavyzdžiui, „Mėnulis kuria savo šviesą“, yra galingas atitraukiklis. Nesąmonė ar nereikšmingas atitraukiklis („Mėnulis yra sūris“) palengvina klausimą ir daro jį mažiau išskirtinį.

Gerų klausimų principai: (1) kamienas klausia kažko vieno ir aiškaus; (2) yra tik vienas teisingas atsakymas; (3) parinktys yra panašaus ilgio ir gramatiškai suderinamos su šaknimi (ilgesnis variantas paprastai yra teisingas, nesuteikia jokio supratimo); (4) jei įmanoma, vengiama parinkčių „viskas/nėra“; (5) jei kamienas yra neigiamas ("nėra"), jis pabrėžiamas; (6) klausimai matuoja pasiekimų lygį – užduodami prisiminimo klausimus pasiekimų analizei praleidžiamas balas.

Elemento sunkumas yra klausimas, koks sudėtingas; Diskriminacija yra tai, kiek klausimas atskiria žinančius nuo tų, kurie nežino. Geras egzaminas – tai įvairaus sunkumo dalykų derinys.

Patarimas: užduodami AI klausimus, įvardykite tikslinę klaidingą nuomonę: pasakykite „blaškikliai turėtų būti pagrįsti šiais 3 įprastais klaidingais įsitikinimais“. Tokiu būdu jūs gaunate mokomuosius, o ne atsitiktinius trukdžius.

Klausimų tipai

Keli pasirinkimai: greitas matas, automatiškai įvertinamas; tačiau norint išmatuoti aukštesnio laipsnio mąstymą, reikia kruopštaus dizaino. Atviras/trumpasis atsakymas: Rodo paties mokinio teiginį; Jis vertinamas rubrika (6 vnt.). Tiesa-netiesa: greitas, bet didelis sėkmės faktorius. Atitikimas: tinka sąvokos ir apibrėžimo santykiams. Aukštesnio laipsnio mąstymo klausimai: scenarijais pagrįsti elementai, kuriuose klausiama „kodėl/kaip/vertinti“; Jis matuoja analizės-vertinimo naudą. AI gamina jų visų brėžinius; Jūsų darbas yra pasirinkti, kuris tipas matuoja kokį rezultatą.

Žingsnis po žingsnio: viktorinos kūrimas naudojant AI

1. Suteikite padidėjimo ir žydėjimo lygį. Klausimas turėtų išmatuoti tą lygį.
2. Nurodykite tipą ir numerį. „6 atsakymų variantai + 2 atviri“.
3. Pavadinkite išblaškymo strategiją. Kokiomis klaidingomis nuostatomis jis turėtų būti grindžiamas?
4. Paprašykite raktų ir pagrindimo. Teisingas atsakymas į kiekvieną klausimą ir kodėl kiti yra neteisingi.
5. Patikrinkite raktą rankiniu būdu. Išspręskite kiekvieną klausimą patys; Ar AI pažymėta linija tikrai teisinga?
6. Išlygiavimo ir poslinkio tikrinimas. Ar klausimas naudingas? Ar yra kultūrinio / lyties šališkumo?
7. Sunkumo balansas. Sureguliuokite lengvo-vidutinio kietumo mišinį.

trys mini dėklai

1 atvejis – neteisingas klavišas. Mokslo mokytojas atliko 10 klausimų viktoriną iš AI. Trečiojo klausimo raktas buvo pažymėtas "B", bet kai mokytojas jį išsprendė, jis pamatė, kad teisingas atsakymas yra "C" - dirbtinis intelektas manė, kad jo blaškiklis yra teisingas. Jei mokytojas nebūtų jo pataisęs, tai žinantį mokinį būtų laikęs klaidingu. Išsprendus raktą ranka pavyko išsaugoti visą viktoriną.

2 atvejis – silpna išblaškiklio korekcija. Pirmojoje mokytojo viktorinoje blaškytojai buvo nesąmoningi, o mokiniai turėjo pašalinti ir rasti teisingą atsakymą. Jis privertė dirbtinį intelektą atkurti „blaškiklius, pagrįstus šiais įprastais klaidingais įsitikinimais: X, Y, Z“. Naujoje viktorinoje padaugėjo diskriminacijos; klasės vidurkis geriau atspindėjo realų mokymąsi.

3 atvejis – stiprinimo lygiavimas. Istorijos mokytojo rezultatas buvo analizės lygiu („susijusios su priežastimis“), tačiau AI pateikė prisiminimo klausimus („pasakyk datą“). Mokytojas atnaujino raginimą kaip „įgijimo analizės lygiu; užduokite scenarijaus klausimus, kurie nustato priežasties ir pasekmės ryšį“. Klausimai tapo pasiekimų matu.

Kopijuojami šablonai

1) Kelių pasirinkimų rinkinys, pagrįstas pasiekimais:

Jūsų vaidmuo: [dalyko] mokytojas. Gain: „[gain]“ ([žydėjimo lygis]), [X. klasė]. Parašykite 6 klausimus su atsakymų variantais, kurie įvertina šį rezultatą. Tegul kiekvienas klausimas turi 4 variantus; Tegul blaškikliai turi būti pagrįsti šiais įprastais klaidingais įsitikinimais: [užrašykite klaidingus įsitikinimus]. Atskirame raktų skyriuje paaiškinkite kiekvieno klausimo teisingą atsakymą ir kodėl KIEKVIENA parinktis yra teisinga / klaidinga. Mišrus lengvas-vidutinis-sunkus.

2) Atsakymo rakto patvirtinimas:

Po vieną išspręskite toliau pateiktus klausimus su keliais pasirinkimais. Kiekvienam klausimui: (a) teisingas atsakymas, kurį radote, (b) priežastis, (c) ar jis atitinka pažymėtą raktą. Aiškiai pažymėkite neatitikimus kaip „PRITAIKYMAS“. Klausimai ir raktas: [įklijuoti]

3) Aukšto lygio (scenarijaus) klausimas:

„[tema]“, [X. klasė], parašyti 3 scenarijais pagrįstus klausimus analizės-vertinimo lygiu. Leiskite kiekvienam klausimui trumpai apibūdinti situaciją ir paprašyti mokinio pagrįsti/palyginti. Neleisk, kad tai būtų išspręsta mintinai. Pridėkite atsakymų pavyzdžius ir vertinimo patarimus.

4) Šališkumo ir atitikties auditas:

Patikrinkite šiuos klausimus: lyties / kultūros / regiono šališkumas, nesąžiningas pranašumas / trūkumas tam tikrai grupei, netinkamas kontekstas. Pažymėkite probleminius daiktus ir pasiūlykite neutralią alternatyvą. Klausimai: [įklijuoti]

Silpnas raginimas / Stiprus raginimas

Silpnas raginimas:

Parašykite 10 klausimų apie trupmenas.

Lygis, rezultatas, tipas, išblaškymo strategija, nėra rakto; Jo kokybė ir derinimas paliekami atsitiktinumui.

Galingas raginimas:

Jūsų vaidmuo: matematikos mokytojas. Mokymosi rezultatas: „Studentas prideda dvi trupmenas su skirtingais vardikliais“ (taikymas). 5 klasė. 6 klausimai su atsakymų variantais, 4 variantai. Išblaškikliai turėtų būti pagrįsti tokiomis klaidingomis nuostatomis: skaitiklių ir vardklių pridėjimas tiesiogiai, skaitiklio išlaikymas pastovus ir vardiklio pridėjimas. Pateikite kiekvieno klausimo raktą ir parinkties aprašymą. Sumaišykite lengvą-vidutinį-sunkų.

Klausimo tipas

Lygis, kurį matuoja

stiprumo

Dėmesio

keli pasirinkimai

Bet koks lygis (priklauso nuo dizaino)

Greitas, automatinis balas

Distraktoriaus kokybė

atviras galas

supratimas-kuriantis

originali išraiška

Reikia rubrikos

tiesa-netiesa

prisiminti

labai greitai

Sėkmės koeficientas yra didelis

Scenarijus pagrįstas

Analizė-vertinimas

neleidžia įsiminti

Rašyba sudėtinga, AI padeda

Dažnos klaidos

• Nepatikrina rakto. Dažniausia ir nesąžiningiausia klaida; AI sukuria neteisingą raktą, jį žinantis studentas taps auka.
• Nesąmonių atitraukiklis. Neįtikėtina parinktis supaprastina klausimą nemokamai.
• Stiprinimo lygio neatitikimas. Klausimo prisiminimas analizei gauti; nepataikė į tikslą.
• Kalba, kuri duoda užuominų. Tai, kad ilgiausias / išsamiausias variantas visada yra teisingas, moko studentus modelių.
• Nepastebimas šališkumas. Pažįstamas konkrečios kultūros / grupės kontekstas kai kuriems studentams suteikia nesąžiningą pranašumą.

Atsargiai: AI kartais pateikia dviprasmiškus klausimus, kai daugiau nei viena parinktis gali būti įrodyta kaip „teisinga“. Į kiekvieną klausimą jis atsakė klausimu "Ar yra viena ir neginčijama tiesa?" Išbandykite tai sakydami; Priešingu atveju išaiškinkite šaknį.

Apibendrinant

Geras klausimas išmatuoja pasiekimų lygį aiškiu pagrindu ir tikėtinais trukdžiais. AI greitai sukuria daugybę klausimų kontūrų, trukdžių ir raktų, kurie priklauso nuo įsigijimo; Jei papasakosite tiksliniams klaidingus įsitikinimus, atitraukiantys asmenys bus pamokantys. Tačiau dirbtinis intelektas gali pateikti neteisingus raktus, silpnus atitraukiančius veiksnius, negaunamus ar šališkus klausimus. Išspręskite kiekvieną elementą, kad patikrintumėte raktą, patikrintumėte išlygiavimą ir šališkumą; Paskutinis testas yra mokytojo.

Taikymo užduotis

Norėdami gauti rezultatą, sugeneruokite 6 klausimus naudodami šabloną „Kelių pasirinkimų rinkinys pagal rezultatą“; Nurodykite išblaškymo strategiją patys. Tada išspręskite kiekvieną klausimą patys ir palyginkite jį su AI raktu prieš naudodami šabloną „Atsakymo rakto patvirtinimas“. Ištaisykite visus neatitikimus. Galiausiai parašykite scenarijaus versiją, kuri pakelia vieną iš klausimų į analizės lygį.

kontrolinis sąrašas

• [ ] Ar klausimus uždaviau pagal mokymosi rezultato Bloom lygį?
• [ ] Ar blaškytojus grindžiau tikromis klaidingomis nuostatomis?
• [ ] Ar aš patikrinau kiekvieno klausimo raktą spręsdamas pats?
• [ ] Ar esu tikras, kad yra vienas, neabejotinai teisingas atsakymas?
• [ ] Ar patikrinau, ar nėra šališkumo ir tinkamumo pagal amžių?