Küsimuste ja viktoriinide tootmine: esemete kirjutamine ja segajate kvaliteet

Kasu:

• Võimalus genereerida tehisintellekti toega tehisintellekti toega tehisintellekti toega saavutustele vastavaid valikvastustega, avatud ja kõrgema taseme mõtlemisküsimusi
• Oskus kontrollida küsimuse kvaliteeti, rakendades hea distractor (vale, kuid usutav variant), ühe õige vastuse ja punkti raskuse põhimõtteid.
• Mõistke ohtu, et tehisintellekt tekitab valesid vastuseklahve, ebaobjektiivseid või kallutatud küsimusi, ja mõistma, et õpetaja peab iga üksust kontrollima.

Eksamid ja viktoriinid on peamised vahendid, mille abil õpetaja õppimist mõõdab; Kuid heade küsimuste kirjutamine on raskem, kui arvate. Mitmetähenduslik juur, sarnased valikud ja vihjeid andev keel vähendavad küsimuse mõõtmisväärtust. Tehisintellekt loob kiiresti suure hulga tulemustega seotud küsimuste visandeid; Jälgite kvaliteeti, kontrollite vastuse võtit ja säilitate saavutuste joondamise. Selles üksuses käsitleme head artiklite kirjutamist ja kvaliteetset viktoriini koostamist tehisintellektiga. Piir on selge: tehisintellekt võib esitada valesid vastuseklahve, mitteobjektiivseid või kallutatud küsimusi; Õpetaja kontrollib iga üksust.

Aine anatoomia ja heade küsimuste põhimõtted

Valikvastustega küsimusel on kaks osa: tüvi (küsimustüvi) – põhiküsimus, mida küsitakse; ja valikud — üks on õige vastus, teised segavad. Hea segaja, kuigi see on vale, tundub usutav õpilasele, kes pole ainet täielikult omandanud; See põhineb üldiselt levinud eksiarvamusel. Levinud eksiarvamus nagu "Kuu toodab ise valgust" on võimas segaja. Jama või ebaoluline segaja ("Kuu on juust") muudab küsimuse lihtsamaks ja muudab selle vähem eristatavaks.

Heade küsimuste põhimõtted: (1) Tüvi küsib midagi ühtset ja selget; (2) on ainult üks õige vastus; (3) valikud on sarnase pikkusega ja grammatiliselt ühilduvad juurega (pikem variant on üldiselt õige, ei anna aimu); (4) võimalusel välditakse valikuid „kõik/mitte ükski“; (5) kui tüvi on eitav (“ei ole”), rõhutatakse seda; (6) küsimused mõõdavad saavutuse taset – meeldetuletusküsimuste esitamine saavutuste analüüsimiseks jätab punktist mööda.

Üksuse raskusaste on küsimuse keerukus; Diskrimineerimine on see, kui palju eraldab küsimus neid, kes teavad, neist, kes ei tea. Hea eksam koosneb erineva raskusastmega ainetest.

Näpunäide: tehisintellektilt küsimusi esitades nimetage sihtmärgi eksiarvamus: öelge, et "häirivad tegurid peaksid põhinema neil kolmel levinud väärarusaamu". Nii saate juhendavaid segajaid, mitte juhuslikke.

Küsimuste tüübid

Valik valik: kiirmõõtmine, automaatselt skooritud; kuid kõrgemat järku mõtlemise mõõtmine nõuab hoolikat kavandamist. Avatud/lühivastus: Näitab õpilase enda väidet; Seda hinnatakse rubriigiga (6. ühik). Tõene-vale: kiire, kuid suur õnnefaktor. Sobivus: sobib mõiste ja määratluse suhte jaoks. Kõrgemat järku mõtlemisküsimused: stsenaariumipõhised üksused, mis küsivad "miks/kuidas/hinnata"; See mõõdab analüüsi-hindamise kasu. AI koostab nende kõigi jaoks kavandid; Teie ülesanne on valida, milline tüüp millist tulemust mõõdab.

Samm-sammult: viktoriini koostamine tehisintellektiga

1. Andke kasumi ja õitsengu tase. Küsimus peaks seda taset mõõtma.
2. Määrake tüüp ja number. "6 valikvastustega + 2 avatud otsaga".
3. Nimetage distractor strateegia. Millistele väärarusaamadele peaks see tuginema?
4. Küsi võtmeid ja põhjendust. Õige vastus igale küsimusele ja miks teised eksivad.
5. Kontrollige võtit käsitsi. Lahendage iga küsimus ise; Kas AI-ga tähistatud joon on tõesti tõsi?
6. Joondamise ja kallutatuse kontrollimine. Kas küsimus mõõdab? Kas on kultuurilist/soolist eelarvamust?
7. Raskuste tasakaal. Reguleerige kerge-keskmise-kõva segu.

kolm minikarpi

Juhtum 1 — vale klahv. Loodusainete õpetaja vastas AI-st 10 küsimusest koosneva viktoriini. 3. küsimuse võti oli märgiga "B", kuid kui õpetaja seda lahendas, nägi ta, et õige vastus oli "C" - tehisintellekt arvas, et tema enda segaja oli õige. Kui õpetaja poleks teda parandanud, oleks ta pidanud seda teadvat õpilast valeks. Võtme käsitsi lahendamine päästis kogu viktoriini.

Juhtum 2 – distraktori nõrk korrigeerimine. Õpetaja esimeses viktoriinis olid segajad mõttetud ja õpilased pidid kõrvaldama ja õige vastuse leidma. Ta lasi AI-l reprodutseerida "häirajaid, mis põhinevad neil levinud väärarusaamadel: X, Y, Z". Uues viktoriinis suurenes diskrimineerimine; klassi keskmine kajastas paremini tegelikku õppimist.

Juhtum 3 – võimenduse joondamine. Ajalooõpetaja tulemus oli analüüsi tasemel ("seob põhjusi"), kuid tehisintellekt esitas meeldetuletusküsimusi ("ütle kuupäev"). Õpetaja värskendas viipa sõnadega "omandamise analüüsi tasemel; küsige stsenaariumiküsimusi, mis loovad põhjuse-tagajärje seose". Küsimustest on saanud saavutuse mõõdupuu.

Kopeeritavad mallid

1) Valikvastustega komplekt saavutuste põhjal:

Sinu roll: [aine] õpetaja. Gain: "[gain]" ([Bloom level]),[X. klass]. Kirjutage 6 valikvastustega küsimust, mis mõõdavad seda tulemust. Igal küsimusel olgu 4 võimalust; Laske segajatel põhineda nendel levinud väärarusaamadel: [kirjutage väärarusaamad]. Iga küsimuse puhul selgitage eraldi võtmejaotises õiget vastust ja seda, miks IGA valik on tõene/väär. Segatud lihtne-keskmine-raske.

2) Vastuse võtme kinnitus:

Lahenda allolevad valikvastustega küsimused ükshaaval. Iga küsimuse puhul: (a) leitud õige vastus, (b) põhjus, (c) kas see vastab märgitud võtmele. Märkige ebakõlad selgelt kui "VASTU". Küsimused ja võti: [kleebi]

3) Kõrgetasemeline (stsenaariumi) küsimus:

"[teema]", [X. klass], kirjuta 3 stsenaariumipõhist küsimust analüüsi-hindamise tasemel. Andke igale küsimusele lühike olukord ja küsige õpilaselt põhjendust/võrdlust. Ära lase seda südamega lahendada. Lisa näidisvastused ja hindamisnõuanded.

4) eelarvamuste ja vastavusaudit:

Kontrollige järgmisi küsimusi: soo/kultuuri/piirkonna kallutatus, ebaõiglane eelis/miinus teatud rühma suhtes, sobimatu kontekst. Märkige probleemsed esemed ja soovitage neutraalset alternatiivi. Küsimused: [kleebi]

Nõrk viip / Tugev viip

Nõrk viip:

Kirjutage 10 küsimust murdude kohta.

Tase, tulemus, tüüp, segaja strateegia, võtmeta; Selle kvaliteet ja joondamine on jäetud juhuse hooleks.

Võimas viip:

Sinu roll: matemaatikaõpetaja. Õpitulemus: "Õpilane lisab kaks erineva nimetajaga murru" (rakendus). 5. klass. 6 valikvastustega küsimust, 4 valikut. Distraktorid peaksid põhinema järgmistel väärarusaamadel: nii lugejate kui ka nimetajate otse liitmine, lugeja konstantse hoidmine ja nimetaja liitmine. Andke iga küsimuse jaoks võti ja valiku kirjeldus. Sega lihtne-keskmine-raske.

Küsimuse tüüp

Tase, mida see mõõdab

tugevus

Tähelepanu

valikvastustega

Mis tahes tase (olenevalt disainist)

Kiire, automaatne skoor

Distraktori kvaliteet

avatud lõpuga

mõistmine-loomine

originaalne väljend

Vaja on rubriiki

õige-vale

mäleta

väga kiire

Õnnefaktor on kõrge

Stsenaariumipõhine

Analüüs-hindamine

takistab meeldejätmist

Õigekiri on keeruline, tehisintellekt aitab

Levinud vead

• Ei kontrolli võtit. Kõige sagedasem ja ebaausam viga; AI toodab vale võtme, õpilane, kes seda teab, langeb ohvriks.
• Mõttetu segaja. Ebausutav valik lihtsustab küsimust tasuta.
• Võimsuse taseme mittevastavus. Küsimuse meeldejätmine analüüsi omandamiseks; laseb sihtmärgist mööda.
• Keel, mis annab vihjeid. See, et pikim/detailseim variant on alati õige, õpetab õpilasele mustreid.
• Kahtlemata eelarvamus. Konkreetse kultuuri/rühma tuttav kontekst annab mõnele õpilasele ebaausa eelise.

Ettevaatust: AI tekitab mõnikord mitmetähenduslikke küsimusi, mille puhul saab väita, et rohkem kui üks võimalus on "õige". Ta vastas igale punktile küsimusega "Kas on olemas üksainus ja vaieldamatu tõde?" Testige seda öeldes; Vastasel juhul selgitage juur.

Kokkuvõttes

Hea küsimus mõõdab saavutuste taset selge varre ja usutavate segajate abil. Tehisintellekt loob kiiresti suure hulga küsimuste piirjooni, segajaid ja võtmeid, mis sõltuvad omandamisest; Kui räägite sihtmärgile väärarusaamu, on segajad õpetlikud. Tehisintellekt võib aga tekitada valesid võtmeid, nõrku segajaid, hangetamata või kallutatud küsimusi. Lahendage iga üksus võtme kontrollimiseks, joondamise ja kallutamise kontrollimiseks; Lõplik test on õpetaja.

Rakenduse ülesanne

Tulemuse saamiseks genereerige malliga „Tulemusega põhinev valikvastustega komplekt” 6 küsimust; Täpsustage distractori strateegia ise. Seejärel lahendage iga küsimus ise ja võrrelge seda tehisintellekti võtmega enne malli „Vasta võtme kinnitamine” kasutamist. Parandage kõik mittevastavused. Lõpuks kirjutage stsenaariumi versioon, mis tõstab ühe küsimuse analüüsi tasemele.

kontrollnimekiri

• [ ] Kas esitasin küsimused vastavalt õpiväljundi Bloomi tasemele?
• [ ] Kas ma lähtusin segajates tegelikest väärarusaamadest?
• [ ] Kas ma olen kontrollinud iga küsimuse võtit, lahendades selle ise?
• [ ] Kas ma olen kindel, et on üks vaieldamatult õige vastus?
• [ ] Kas ma olen kontrollinud eelarvamusi ja vanusele vastavust?