Gevinster:
- Evnen til å ha kunstig intelligens produserer flervalgsspørsmål, distraktorer basert på typiske feil og løsningsnøkler ved å spesifisere emne, nivå og vanskelighetsfordeling.
- Evne til å fange feil nøkkel og flere/null korrekte alternativfeil ved uavhengig å validere hver spørsmål og svarnøkkel, helst i bulk, med SymPy
- Evne til å evaluere kvaliteten på distraktorer, entydigheten og vanskelighetsbalansen til spørsmål, og godkjenne hvert spørsmål før du tar eksamen.
Å forberede eksamens- og øvingsspørsmål er en av de mest tidkrevende oppgavene i matematikkundervisningen: stille spørsmål med passende vanskelighetsgrad, utforme plausible distraktorer (feil men plausible alternativer), forberede svarnøkkelen og balanseringsvansker tar timer. Kunstig intelligens kan fremskynde denne prosessen – generere dusinvis av spørsmålsvariasjoner, flervalgsalternativer og løsningsnøkler fra ett emne. Men nøyaktigheten av hvert spørsmål som produseres og feilfriheten til hver svarnøkkel må verifiseres uavhengig; En feil nøkkel betyr at elevene mister poeng urettferdig. I denne enheten lærer du hvordan du bruker AI som en spørsmålsgenereringspartner og hvordan du modererer hvert spørsmål.
Noen få definisjoner. En distraktor er et alternativ i et flervalgsspørsmål som ikke er riktig, men som tilsvarer en vanlig feil eleven kan gjøre. En god distraktor er ikke tilfeldig; Gjenspeiler en typisk feil (tegnfeil, regelforvirring). Svarnøkkelen er en liste over riktige svar på spørsmålene. Vanskelighetsbalanse er den passende fordelingen av enkle-middels-vanskelige spørsmål i en eksamen.
Bidrag fra AI til generering av spørsmål
- Spørsmålsvariasjon: Flere like spørsmål fra et mønster (endre tallene).
- Distraktordesign: Sannsynligvis feil valg basert på vanlige feil.
- Løsningsnøkkeloversikt: Trinn-for-trinn-løsning på hvert problem.
- Vanskelighetsgrad: Klassifisere spørsmål som enkle/middels/vanskelige.
- Fagdekning: Sett med spørsmål som dekker ulike underemner i en pensum.
- Bloom taxonomy fit: Spørsmål i henhold til kognitive nivåer som å huske, bruke, analysere.
Trinn for trinn: generere et pålitelig sett med spørsmål
1. Spesifiser emne, nivå og antall spørsmål. Som "10. klasse videregående skole, andregradsligninger, 10 flervalgsspørsmål."
2. Be om spørsmålstype og vanskelighetsfordeling. Be om en distribusjon som "4 enkle, 4 medium, 2 vanskelige."
3. Løs hvert spørsmål uavhengig. Løs hvert spørsmål selv eller med SymPy; Sammenlign det med svarnøkkelen fra YZ. Dette trinnet er ikke omsettelig.
4. Se etter distraktorer. Er feil alternativer virkelig feil? Noen ganger produserer AI mer enn ett riktig alternativ, eller en distraktor er faktisk riktig. Sjekk hvert alternativ.
5. Garanterer at det er nøyaktig ett riktig svar. I flervalg må nøyaktig ett alternativ være riktig; Det må ikke være null eller mer enn én riktig.
6. Se etter usikkerhet og duplisering. Er spørsmålet entydig? Måler de to spørsmålene det samme? Er tallene rimelige (f.eks. hvis roten skal være negativ)?
Oppmerksomhet: AI gjør to vanligste feil når du genererer flervalgsspørsmål: (1) alternativet det merket som "sant" er faktisk feil, (2) mer enn ett alternativ er riktig, eller ingen av dem er riktig. Ikke bruk noen spørsmål uten å løse hvert spørsmål uavhengig og vurdere hvert av de fire alternativene separat som sant/usant.
Spørsmål kvalitetskontroll diagram
kontroll
Spørsmål
hva du skal søke etter
nøyaktighet
Er svartasten riktig?
Bekreftelse ved uavhengig løsning
bare sant
Er bare 1 alternativ riktig?
De 3 andre må være feil
Distraktor kvalitet
Er feilene plausible?
Bør være basert på typisk feil
Klarhet
Er spørsmålet entydig?
Det skal ikke være usikkerhet
Nivåoverholdelse
Er vanskelighetsgraden passende for målet?
Verken for lett eller for vanskelig
Omfang
Er temaet godt representert?
Underemner er balansert
tre minisaker
Tilfelle 1 — Feil nøkkel. En lærer laget et flervalgssett med 12 spørsmål. Da han løste hvert spørsmål med SymPy, fant han ut at i 3 av de 12 spørsmålene var alternativet AI’en hadde merket «riktig» feil – det faktiske riktige svaret var et annet alternativ. Læreren rettet på nøklene. Hvis dette settet hadde blitt brukt uten verifisering, ville hele klassen blitt evaluert urettferdig i 3 spørsmål.
Tilfelle 2 — To riktige alternativer. I ett spørsmål la AI inn både "x = 2" og "x = 2 eller x = −2"; Begge var sanne på en måte, og spørsmålet var uklart. Læreren omorganiserte alternativene og la bare ett riktig svar. Distraktorer må være klart feil.
Tilfelle 3 - Svak distraktor. I en ingeniørklasse plasserte AI irrelevante distraktorer som "42", "aksaray", "blå", "17" osv. i et spørsmål; Riktig svar var åpenbart "17". Læreren ba om numeriske distraktorer basert på typiske regnefeil (f.eks. verdi som følge av tegnfeil), og spørsmålene ble sanne diskriminatorer. Den gode distraktoren representerer en sann falsk vei.
Fire kopierbare maler
1) Sett med flervalgsspørsmål:
Generer [n] FLERE VALG-spørsmål om [emne]. Nivå:[nivå]. Vanskelighetsgrad: [x lett, y middels, z vanskelig]. La hvert spørsmål ha 4 alternativer; La NØYAKTIG 1 være riktig og de 3 andre er plausible distraktorer basert på typiske feil. Skriv også trinnvis løsning og riktig svar for hvert spørsmål. Jeg vil verifisere alle med SymPy.
2) Spørsmålsvariasjon (fra mønster):
Ta dette spørsmålet som MØNSTER: [eksempelspørsmål]. Generer [n] forskjellige versjoner som måler det samme konseptet, men med varierende tall/kontekst. Løs svarene for hver versjon trinn for trinn. La svarene være forskjellige fra hverandre.
3) Generering av løsningsnøkkel:
Lag en STEG-FOR-STEG-løsning og endelig svar for hvert av spørsmålene nedenfor. Spesifiser regelen du bruker. Merk løsningen du er usikker på; Jeg vil uavhengig bekrefte hvert svar. Spørsmål: [her]
4) Distraktorforbedring:
Se gjennom distraktorene for dette flervalgsspørsmålet. Forklar HVILKEN typisk elevfeil hver ukorrekte distraktor tilsvarer. Erstatt irrelevante eller åpenbare ukorrekte distraktorer med de som er basert på faktiske feil. Spørsmål: [her]
Svak forespørsel / Sterk forespørsel
Svak: "Gjør meg 10 avledede spørsmål."
Resultat: Usikkert nivå, tilfeldig vanskelighetsfordeling, ubekreftet svarnøkkel, tilfeldig sett med distraktorer (hvis noen).
Sterkt: "Produser 10 avledede flervalgsspørsmål for 12. klasse på videregående skole: 4 enkle (grunnregler), 4 medium (kjede/produktregel), 2 vanskelige (sammensatte funksjoner). La det være 4 valg i hvert spørsmål, nøyaktig 1 riktig, de andre er distraktorer basert på typiske feil (glemmer den indre deriverte, fortegn svar trinn for hvert spørsmål.").
Resultat: Et sett som er jevnt, balansert, distraherende er meningsfylt og hvert svar er kontrollerbart.
Vanlige feil
- Verifiserer ikke svarnøkkelen. Det AI sier er "riktig" er ofte feil; Løs hvert spørsmål uavhengig.
- Mer enn en/null er det riktige alternativet. I multiple choice må det være nøyaktig én sannhet; Sjekk hvert alternativ separat.
- Svake distraktorer. Irrelevante eller åpenbart ukorrekte alternativer gjør spørsmålet lite særpreget.
- Spesifiserer ikke vanskelighetsfordelingen. De ser alle ut til å ha samme vanskelighetsgrad; Nivåevaluering kan ikke foretas.
- Repetisjon og overlapping. Ulike spørsmål kan måle det samme konseptet; Sjekk dekningsbalansen.
- Uklart uttrykk. Spørsmål med dobbel betydning villeder elevene urettferdig.
Tips: Den mest effektive måten å validere et sett med spørsmål på er å skrive kode som løser alle spørsmålene samtidig med SymPy. Fortell AI-en "skriv kode som løser hvert av disse 10 problemene med SymPy", kjør koden, og bulksammenlign SymPy-resultatene med AI-ens svarnøkkel. På denne måten sjekker du de 10 spørsmålene ikke ett etter ett, men kollektivt og deterministisk.
Oppsummert
AI øker dramatisk generering av matematikkspørsmål og eksamen: spørsmålsvariasjon, distraktordesign, løsningsnøkkel, vanskelighetsgrad. Men hvert spørsmål og hver svarnøkkel må valideres uavhengig – fortrinnsvis bulkverifisert med SymPy. De vanligste feilene er feil svarnøkkel, flere/null riktige alternativer og svake distraktorer. Å spesifisere tema, nivå og vanskelighetsfordeling fra starten av øker kvaliteten. Eventuelle ubekreftede spørsmål skal ikke delta i eksamen.
Søknadsoppgave
Velg et emne. La AI produsere 8-10 flervalgsspørsmål + løsninger med en viss vanskelighetsfordeling med den første malen. Deretter, husk fra enhet 4, få AI til å skrive en kode som løser alle spørsmålene med SymPy og kjøre koden. Sammenlign SymPy-resultater med YZs svarnøkkel. Kontroller at det er nøyaktig ett riktig valg i hvert spørsmål, og at distraktorene faktisk er feil. Finn og korriger minst én feil eller svak distraktor.
sjekkliste
- [ ] Jeg har tydelig oppgitt emne, nivå og vanskelighetsfordeling.
- [ ] Jeg løste hvert spørsmål uavhengig (helst batch med SymPy).
- [ ] Jeg sammenlignet svarnøkkelen med SymPy-resultatene.
- [ ] Jeg bekreftet at det er nøyaktig ett riktig alternativ i hvert spørsmål.
- [ ] Jeg sjekket at distraktorene var basert på typiske feil og faktisk var feil.
- [ ] Jeg sørget for at det ikke var vage utsagn og ingen repeterende spørsmål.