Добици:
- Способност генерисања вишеструких избора, отворених питања и питања вишег нивоа размишљања у складу са достигнућима уз подршку вештачке интелигенције
- Способност да се контролише квалитет питања применом принципа доброг дистрактора (погрешна али вероватна опција), једног тачног одговора и тежине ставке.
- Схватите ризик да вештачка интелигенција произведе погрешне кључеве одговора, необјективна или пристрасна питања и будите у стању да видите да наставник мора да провери сваку ставку.
Испити и квизови су примарни алати помоћу којих наставник мери учење; Али писање добрих питања је теже него што мислите. Двосмислен корен, сличне опције и језик који даје трагове умањују мерну вредност питања. АИ брзо генерише велики број обриса питања везаних за исход; Надгледате квалитет, верификујете кључ за одговор и одржавате усклађеност постигнућа. У овој јединици ћемо покрити добро писање чланака и квалитетну израду квизова са АИ. Граница је јасна: АИ може произвести нетачне кључеве одговора, необјективна или пристрасна питања; Наставник проверава сваку ставку.
Анатомија материје и принципи добрих питања
Питање са вишеструким избором има два дела: основу (основа питања) — главно питање које се поставља; и опције — један је тачан одговор, други су дистрактори. Добар дистрактор, иако је погрешан, чини се вероватним ученику који није у потпуности савладао предмет; Генерално се заснива на уобичајеној заблуди. Уобичајена заблуда као што је "Месец производи сопствену светлост" је моћан дистрактор. Бесмислица или небитан дистрактор („Месец је сир“) олакшава питање и чини га мање препознатљивим.
Принципи добрих питања: (1) Стабло поставља нешто једно и јасно; (2) постоји само један тачан одговор; (3) опције су сличне дужине и граматички су компатибилне са кореном (дужа опција је генерално тачна, не дају појма); (4) опције „све/ништа“ се избегавају ако је могуће; (5) ако је основа негативна („није“), наглашава се; (6) питања мере ниво постигнућа — постављање питања присећања ради анализе постигнућа промашује циљ.
Тежина ставке је колико је тешко питање; Дискриминација је колико питање раздваја оне који знају од оних који не знају. Добар испит је мешавина предмета различите тежине.
Савет: Када постављате питања од АИ, наведите циљну заблуду: реците „ометачи треба да се заснивају на ове 3 уобичајене заблуде“. На овај начин добијате дистракторе инструкције, а не насумичне.
Врсте питања
Вишеструки избор: Брза мера, аутоматски се бодује; али мерење размишљања вишег реда захтева пажљив дизајн. Отворени/кратак одговор: Показује сопствену изјаву ученика; Бодује се рубриком (6. јединица). Тачно-нетачно: Брз, али велики фактор среће. Подударање: Добро за однос концепта и дефиниције. Питања вишег реда размишљања: ставке засноване на сценарију које постављају питање „зашто/како/проценити“; Мери добитке од анализе-вредновања. АИ производи нацрте за све њих; Ваш посао је да одаберете који тип мери који исход.
Корак по корак: Производња квиза са АИ
- Дајте ниво добити и Блоом. Питање би требало да мери тај ниво.
- Наведите врсту и број. „6 вишеструких избора + 2 отворена“.
- Наведите стратегију дистрактора. На којим заблудама треба да се заснива?
- Затражите кључеве и оправдање. Тачан одговор на свако питање и зашто су остала погрешна.
- Проверите кључ ручно. Свако питање решите сами; Да ли је линија означена АИ заиста истинита?
- Провера поравнања и пристрасности. Да ли питање мери добит? Да ли постоји културолошка/родна пристрасност?
- Равнотежа тежине. Подесите мешавину лако-средње-тврдо.
три мини кофера
Случај 1 — Погрешан кључ. Наставник науке је урадио квиз од 10 питања од АИ. Кључ за треће питање је био означен са „Б“, али када га је наставник решио, видео је да је тачан одговор „Ц“ — АИ је мислио да је њен сопствени дистрактор тачан. Да га учитељ није исправио, сматрао би погрешним ученика који је то знао. Ручним решавањем кључа сачуван је цео квиз.
Случај 2 — Слаба корекција дистрактора. У првом наставниковом квизу, дистрактори су били бесмислени и ученици су морали да елиминишу и пронађу тачан одговор. Он је дао АИ да репродукује „дистракторе на основу ових уобичајених заблуда: Кс, И, З“. Појачана дискриминација у новом квизу; разредни просек боље одражава стварно учење.
Случај 3 — Поравнање појачања. Исход наставника историје био је на нивоу анализе („повезани узроци“), али АИ је произвела питања за сећање („наведите датум“). Наставник је ажурирао упит као „на нивоу анализе набавке; постављајте питања сценарија која успостављају узрочно-последичну везу“. Питања су постала мерило постигнућа.
Шаблони који се могу копирати
1) Сет са више избора на основу постигнућа:
Ваша улога: [предметни] наставник. Добитак: "[појачање]" ([ниво цветања]), [Кс. разред]. Напишите 6 питања са више одговора која мере овај исход. Нека свако питање има 4 опције; Нека се дистрактори заснивају на овим уобичајеним заблудама: [напишите заблуде]. За свако питање објасните тачан одговор и зашто је СВАКА опција тачна/нетачна у посебном кључном одељку. Мешано лако-средње-тешко.
2) Одговорите на верификацију кључа:
Решите доленаведена питања са више одговора једно по једно. За свако питање: (а) тачан одговор који сте пронашли, (б) разлог, (ц) да ли одговара означеном кључу. Јасно означите недоследности као „ПРОТИВРЕЧНОСТ“. Питања и кључ: [налепи]
3) Питање високог нивоа (сценариј):
„[предмет]“, [Кс. разред], напишите 3 питања заснована на сценарију на нивоу анализе-евалуације. Нека свако питање да кратку ситуацију и питајте ученика за оправдање/поређење. Не дозволите да се то реши напамет. Додајте узорке одговора и савете за евалуацију.
4) Ревизија пристрасности и усклађености:
Проверите следећа питања за: пристрасност полова/културе/региона, неправедну предност/недостатак за одређену групу, неприкладан контекст. Означите проблематичне ставке и предложите неутралну алтернативу. Питања: [налепи]
Слаби промпт / Јаки промпт
Слабо обавештење:
Напиши 10 питања о разломцима.
Ниво, исход, тип, стратегија дистрактора, без кључа; Његов квалитет и усклађеност су препуштени случају.
Снажан упит:
Ваша улога: наставник математике. Исход учења: „Ученик сабира два разломка са различитим имениоцима“ (примена). 5. разред. 6 питања са више одговора, 4 опције. Дистрактори би требало да се заснивају на следећим погрешним схватањима: директно сабирање бројила и именилаца, одржавање константног бројача и додавање имениоца. Дајте кључ и опис опција за свако питање. Мешајте лако-средње-тешко.
Врста питања
Ниво који мери
снага
Пажња
вишеструки избор
Било који ниво (у зависности од дизајна)
Брз, аутоматски резултат
Квалитет дистрактора
отвореног краја
разумевање-стваралаштво
оригиналан израз
Потребна је рубрика
истинито-нетачно
запамтите
веома брзо
Фактор среће је висок
Сценарио басед
Анализа-евалуација
спречава памћење
Правопис је тежак, АИ помаже
Уобичајене грешке
- Не проверава кључ. Најчешћа и најнеправеднија грешка; АИ производи погрешан кључ, ученик који то зна биће жртва.
- Ометач глупости. Невероватна опција поједностављује питање бесплатно.
- Неподударање нивоа појачања. Памћење питања за аквизицију анализе; промаши циљ.
- Језик који даје трагове. Чињеница да је најдужа/најдетаљнија опција увек тачна учи ученике шаблонима.
- Гледајући пристрасност. Познати контекст одређене културе/групе даје неким ученицима неправедну предност.
Опрез: АИ понекад производи двосмислена питања где се више од једне опције може аргументовати као „тачно“. На сваку ставку је одговарао питањем "Постоји ли једна једина и неоспорна истина?" Тестирајте тако што ћете рећи; У супротном, разјасните корен.
Укратко
Добро питање мери ниво постигнућа са јасним основама и уверљивим дистракторима. АИ брзо генерише велики број обриса питања, дистрактора и кључева који зависе од аквизиције; Ако циљате кажете заблуде, дистрактори ће бити поучни. Међутим, вештачка интелигенција може да произведе погрешне кључеве, слабе дистракторе, ван аквизиције или пристрасна питања. Решите сваку ставку да бисте проверили кључ, проверили поравнање и пристрасност; Завршни тест је за наставника.
Задатак апликације
За исход направите 6 питања са шаблоном „Скуп вишеструких избора на основу исхода“; Сами одредите стратегију дистрактора. Затим сами решите свако питање и упоредите га са кључем вештачке интелигенције пре употребе шаблона „Провера кључа за одговор“. Исправите све неслагања. На крају, напишите верзију сценарија која једно од питања подиже на ниво анализе.
контролна листа
- [ ] Да ли сам постављао питања у складу са Блум нивоом исхода учења?
- [ ] Да ли сам дистракторе базирао на стварним заблудама?
- [ ] Да ли сам проверио кључ за свако питање тако што сам га сам решио?
- [ ] Да ли сам сигуран да постоји један, несумњиво тачан одговор?
- [ ] Да ли сам проверио пристрасност и узраст?