Mga nadagdag:
- Kakayahang bumuo ng maramihang pagpipilian, bukas at mas mataas na antas ng mga tanong sa pag-iisip na naaayon sa mga tagumpay na may suporta sa artificial intelligence
- Kakayahang kontrolin ang kalidad ng tanong sa pamamagitan ng paglalapat ng mga prinsipyo ng magandang distractor (mali ngunit posible na opsyon), iisang tamang sagot at kahirapan sa item.
- Unawain ang panganib ng artipisyal na katalinuhan na makagawa ng mga maling answer key, walang layunin o bias na mga tanong, at makitang dapat i-verify ng guro ang bawat item.
Ang mga pagsusulit at pagsusulit ay ang mga pangunahing kasangkapan kung saan sinusukat ng guro ang pagkatuto; Ngunit ang pagsulat ng magagandang tanong ay mas mahirap kaysa sa iyong iniisip. Ang isang hindi tiyak na ugat, mga katulad na opsyon, at nagbibigay ng clue na wika ay nakakabawas sa halaga ng pagsukat ng isang tanong. Mabilis na bumubuo ang AI ng malaking bilang ng mga outline ng tanong na nauugnay sa kinalabasan; Sinusubaybayan mo ang kalidad, i-verify ang answer key, at pinapanatili ang pagkakahanay ng pagkamit. Sa yunit na ito, tatalakayin namin ang mahusay na pagsulat ng artikulo at kalidad ng paggawa ng pagsusulit na may AI. Ang limitasyon ay malinaw: AI ay maaaring gumawa ng mga maling answer key, non-layunin o bias na mga tanong; Tinitiyak ng guro ang bawat aytem.
Matter anatomy at mga prinsipyo ng magagandang tanong
Ang isang multiple choice na tanong ay may dalawang bahagi: ang stem (question stem) — ang pangunahing isyu na itinatanong; at mga pagpipilian - ang isa ay ang tamang sagot, ang iba ay distractor. Ang isang mahusay na distractor, kahit na ito ay mali, ay tila kapani-paniwala sa mag-aaral na hindi ganap na nakabisado ang paksa; Ito ay karaniwang batay sa isang karaniwang maling kuru-kuro. Ang isang karaniwang maling kuru-kuro tulad ng "Ang Buwan ay gumagawa ng sarili nitong liwanag" ay isang malakas na distractor. Ang isang walang kapararakan o walang katuturang distractor ("Ang buwan ay isang keso") ay nagpapadali sa tanong at ginagawa itong hindi gaanong kakaiba.
Mga prinsipyo ng magagandang tanong: (1) Ang tangkay ay nagtatanong ng isang bagay na iisa at malinaw; (2) iisa lamang ang tamang sagot; (3) ang mga opsyon ay magkapareho ang haba at grammatically compatible sa root (ang mas mahabang opsyon ay karaniwang tama, huwag magbigay ng clue); (4) Ang mga opsyon na “lahat/wala” ay iiwasan kung maaari; (5) kung ang stem ay negatibo ("ay hindi"), ito ay binibigyang diin; (6) sinusukat ng mga tanong ang antas ng pagkamit—ang pagtatanong ng mga tanong sa pagbabalik-tanaw sa pagsusuri ng pagkamit ay hindi nakamit.
Ang kahirapan ng item ay kung gaano kahirap ang tanong; Ang diskriminasyon ay kung gaano pinaghihiwalay ng tanong ang mga nakakaalam sa mga hindi nakakaalam. Ang isang mahusay na pagsusulit ay isang halo ng mga item na may iba't ibang kahirapan.
Tip: Kapag nagtatanong mula sa AI, pangalanan ang target na maling kuru-kuro: sabihin ang "mga distractor ay dapat na nakabatay sa 3 karaniwang maling kuru-kuro na ito." Sa ganitong paraan makakakuha ka ng mga nakakagambala sa pagtuturo, hindi mga random.
Mga uri ng tanong
Maramihang pagpipilian: Mabilis na sukat, awtomatikong nai-score; ngunit ang pagsukat ng mas mataas na pagkakasunud-sunod na pag-iisip ay nangangailangan ng maingat na disenyo. Open-ended/maikling sagot: Nagpapakita ng sariling pahayag ng mag-aaral; Ito ay binibigyang marka ng rubric (ika-6 na yunit). True-false: Mabilis ngunit mataas ang swerte factor. Pagtutugma: Mabuti para sa konsepto-kahulugan na relasyon. Mga tanong sa pag-iisip ng mas mataas na pagkakasunud-sunod: Mga item na batay sa sitwasyon na nagtatanong ng "bakit/paano/suriin"; Sinusukat nito ang mga nakuha sa pagsusuri-pagsusuri. Gumagawa ang AI ng mga blueprint para sa kanilang lahat; Ang iyong trabaho ay piliin kung aling uri ang sumusukat kung aling resulta.
Hakbang-hakbang: Paggawa ng pagsusulit gamit ang AI
- Ibigay ang pakinabang at antas ng Bloom. Dapat sukatin ng tanong ang antas na iyon.
- Tukuyin ang uri at numero. "6 multiple choice + 2 open ended".
- Pangalanan ang diskarte sa distractor. Anong mga maling paniniwala ang dapat itong batayan?
- Humingi ng mga susi at katwiran. Ang tamang sagot sa bawat tanong at kung bakit mali ang iba.
- Manu-manong i-verify ang susi. Lutasin ang bawat tanong sa iyong sarili; Totoo ba talaga ang linyang minarkahan ng AI?
- Pagsusuri ng alignment at bias. Nasusukat ba ang tanong na nakakakuha? Mayroon bang pagkiling sa kultura/kasarian?
- Balanse ng kahirapan. Ayusin ang halo ng easy-medium-hard.
tatlong mini case
Case 1 — Maling key. Isang guro sa agham ang kumuha ng 10 tanong na pagsusulit mula sa AI. Ang susi sa ika-3 tanong ay minarkahan ng "B", ngunit nang malutas ito ng guro, nakita niya na ang tamang sagot ay "C" - naisip ng AI na tama ang sarili nitong distractor. Kung hindi siya itinuro ng guro, itinuring niyang mali ang estudyanteng nakakaalam nito. Ang paglutas ng susi sa pamamagitan ng kamay ay na-save ang buong pagsusulit.
Case 2 — Mahinang distractor correction. Sa unang pagsusulit ng isang guro, ang mga distractor ay walang katuturan at ang mga mag-aaral ay kailangang alisin at hanapin ang tamang sagot. Pina-reproduce niya ang AI "mga distractor batay sa mga karaniwang maling kuru-kuro na ito: X, Y, Z." Tumaas ang diskriminasyon sa bagong pagsusulit; class average na mas mahusay na sumasalamin sa aktwal na pag-aaral.
Kaso 3 — Makakuha ng pagkakahanay. Ang kinalabasan ng isang guro sa kasaysayan ay nasa antas ng pagsusuri ("nag-uugnay sa mga sanhi") ngunit ang AI ay gumawa ng mga tanong sa pagbabalik-tanaw ("sabihin ang petsa"). In-update ng guro ang prompt bilang "sa antas ng pagsusuri sa pagkuha; magtanong ng mga tanong sa senaryo na nagtatatag ng ugnayang sanhi-epekto." Ang mga tanong ay naging sukatan ng tagumpay.
Mga nakopyang template
1) Multiple choice set batay sa achievement:
Ang iyong tungkulin: guro ng [subject]. Gain: "[makakuha]" ([Bloom level]),[X. klase]. Sumulat ng 6 na multiple choice na tanong na sumusukat sa kinalabasan na ito. Hayaang may 4 na opsyon ang bawat tanong; Ipabatay ang mga nakakagambala sa mga karaniwang maling kuru-kuro na ito: [isulat ang mga maling paniniwala]. Para sa bawat tanong, ipaliwanag ang tamang sagot at kung bakit totoo/mali ang BAWAT opsyon sa isang hiwalay na seksyon ng key. Mixed easy-medium-mahirap.
2) Pag-verify ng susi ng sagot:
Sagutin nang paisa-isa ang mga tanong na maramihang pagpipilian sa ibaba. Para sa bawat tanong: (a) ang tamang sagot na nakita mo, (b) ang dahilan, (c) tumutugma ba ito sa minarkahang susi. Malinaw na markahan ang mga hindi pagkakapare-pareho bilang "KONTRADIKSYON". Mga tanong at susi: [i-paste]
3) Mataas na antas (scenario) na tanong:
"[paksa]", [X. klase], sumulat ng 3 tanong na nakabatay sa senaryo sa antas ng pagsusuri-pagsusuri. Hayaang magbigay ng maikling sitwasyon ang bawat tanong at humingi ng katwiran/paghahambing sa estudyante. Huwag hayaang malutas ito ng puso. Magdagdag ng mga sample na sagot at mga tip sa pagsusuri.
4) Pag-audit ng bias at pagsunod:
Suriin ang mga sumusunod na tanong para sa: bias ng kasarian/kultura/rehiyon, hindi patas na kalamangan/kapinsalaan sa isang partikular na grupo, hindi naaangkop na konteksto. I-flag ang mga may problemang item at magmungkahi ng neutral na alternatibo. Mga Tanong: [i-paste]
Mahinang prompt / Malakas na prompt
Mahinang prompt:
Sumulat ng 10 tanong tungkol sa mga fraction.
Antas, kinalabasan, uri, diskarte sa distractor, walang susi; Ang kalidad at pagkakahanay nito ay naiwan sa pagkakataon.
Napakahusay na prompt:
Ang iyong tungkulin: guro sa matematika. Learning Outcome: "Ang mag-aaral ay nagdaragdag ng dalawang fraction na may magkaibang denominator" (application). ika-5 baitang. 6 na multiple choice na tanong, 4 na pagpipilian. Ang mga distraktor ay dapat na nakabatay sa mga sumusunod na maling kuru-kuro: pagdaragdag ng parehong mga numerator at denominator nang direkta, pinananatiling pare-pareho ang numerator at pagdaragdag ng denominator. Magbigay ng susi at paglalarawan ng opsyon para sa bawat tanong. Paghaluin ang easy-medium-difficult.
Uri ng tanong
Ang antas na sinusukat nito
lakas
Pansin
maramihang pagpipilian
Anumang antas (depende sa disenyo)
Mabilis, awtomatikong marka
Kalidad ng distractor
open ended
pag-unawa-paglikha
orihinal na pagpapahayag
Kailangan ng rubric
totoo-mali
tandaan mo
napakabilis
Mataas ang luck factor
Nakabatay sa senaryo
Pagsusuri-pagsusuri
pinipigilan ang pagsasaulo
Mahirap ang spelling, nakakatulong ang AI
Mga karaniwang pagkakamali
- Hindi na-verify ang susi. Ang pinakamadalas at pinaka-hindi patas na pagkakamali; Ang AI ay gumagawa ng maling susi, ang mag-aaral na alam na ito ay mabibiktima.
- Walang kwentang distractor. Pinapasimple ng hindi kapani-paniwalang opsyon ang tanong nang libre.
- Hindi pagkakatugma sa antas ng gain. Pag-alala sa tanong para sa pagkuha ng pagsusuri; nakakaligtaan ang target.
- Wikang nagbibigay ng mga pahiwatig. Ang katotohanan na ang pinakamahaba/pinakadetalyadong opsyon ay palaging tama ang nagtuturo sa mga pattern ng mag-aaral.
- Tinatanaw ang bias. Ang pamilyar na konteksto ng isang partikular na kultura/grupo ay nagbibigay sa ilang estudyante ng hindi patas na kalamangan.
Pag-iingat: Ang AI kung minsan ay gumagawa ng mga hindi maliwanag na tanong kung saan higit sa isang opsyon ang maaaring ituro bilang "tama". Sinagot niya ang bawat aytem ng tanong na "May iisa ba at hindi mapag-aalinlanganang katotohanan?" Subukan ito sa pamamagitan ng pagsasabi; Kung hindi, linawin ang ugat.
Sa buod
Ang isang mahusay na tanong ay sumusukat sa antas ng pagkamit na may malinaw na tangkay at makatotohanang mga nakakagambala. Ang AI ay mabilis na bumubuo ng isang malaking bilang ng mga outline ng tanong, nakakagambala, at mga susi na nakadepende sa pagkuha; Kung sasabihin mo sa target na maling kuru-kuro, ang mga distractor ay magiging nakapagtuturo. Gayunpaman, ang AI ay maaaring gumawa ng mga maling key, mahinang distractor, out-of-acquisition o bias na mga tanong. Lutasin ang bawat item upang i-verify ang susi, suriin ang pagkakahanay at bias; Ang huling pagsusulit ay sa guro.
Gawain ng aplikasyon
Para sa isang resulta, bumuo ng 6 na tanong gamit ang template na "Multiple choice set based on the outcome"; Tukuyin ang iyong diskarte sa distractor. Pagkatapos ay lutasin ang bawat tanong nang mag-isa at ihambing ito sa susi ng AI bago gamitin ang template na "Pag-verify ng key ng sagot." Itama ang anumang hindi pagkakatugma. Panghuli, sumulat ng isang bersyon ng senaryo na nagpapataas ng isa sa mga tanong sa antas ng pagsusuri.
checklist
- [ ] Nagtanong ba ako ng mga tanong ayon sa antas ng Bloom ng resulta ng pagkatuto?
- [ ] Ibinase ko ba ang mga distractor sa aktwal na maling akala?
- [ ] Na-verify ko ba ang susi sa bawat tanong sa pamamagitan ng paglutas nito sa aking sarili?
- [ ] Sigurado ba akong mayroong isang solong, hindi mapag-aalinlanganang tamang sagot?
- [ ] Sinuri ko na ba ang bias at pagiging angkop sa edad?