Ünite 5 / 11

Soru ve Quiz Üretimi: Madde Yazımı ve Çeldirici Kalitesi

Kazanimlar:

  • Çoktan seçmeli, açık uçlu ve üst düzey düşünme sorularını kazanımla hizalı biçimde yapay zeka desteğiyle üretebilme
  • İyi çeldirici (yanlış ama akla yatkın seçenek), tek doğru cevap ve madde güçlüğü ilkelerini uygulayıp soru kalitesini denetleyebilme
  • Yapay zekanın yanlış cevap anahtarı, kazanım dışı veya yanlı soru üretme riskini kavrayıp her maddeyi öğretmenin doğrulaması gerektiğini görebilme

Sınav ve quiz, öğretmenin öğrenmeyi ölçtüğü temel araçlardır; ama iyi soru yazmak sanıldığından zordur. Belirsiz bir kök, birbirine benzeyen seçenekler, ipucu veren dil bir soruyu ölçme değerinden eder. YZ, kazanıma bağlı çok sayıda soru taslağını hızla üretir; siz kaliteyi denetler, cevap anahtarını doğrular ve kazanım hizasını korursunuz. Bu ünitede iyi madde yazımını ve YZ ile kaliteli quiz üretimini işleyeceğiz. Sınır nettir: YZ yanlış cevap anahtarı, kazanım dışı veya yanlı soru üretebilir; her maddeyi öğretmen doğrular.

Madde anatomisi ve iyi soru ilkeleri

Bir çoktan seçmeli sorunun iki parçası vardır: kök (soru kökü) — sorulan asıl mesele; ve seçenekler — biri doğru cevap, diğerleri çeldirici (distractor). İyi bir çeldirici, yanlış olduğu halde konuyu tam öğrenmemiş öğrenciye akla yatkın gelir; genellikle sık görülen bir kavram yanılgısına dayanır. "Ay'ın ışığını kendisi üretir" gibi yaygın bir yanlış, güçlü bir çeldiricidir. Saçma ya da alakasız çeldirici ("Ay bir peynirdir") soruyu kolaylaştırır ve ayırt ediciliğini bitirir.

İyi soru ilkeleri: (1) Kök tek ve net bir şey sorar; (2) tek doğru cevap vardır; (3) seçenekler benzer uzunlukta ve dilbilgisel olarak köke uyumludur (uzun seçenek genelde doğrudur ipucu vermesin); (4) "hepsi/hiçbiri" seçeneklerinden mümkünse kaçınılır; (5) kök olumsuzsa ("değildir") vurgulanır; (6) soru kazanımın düzeyini ölçer — analiz kazanımına hatırlama sorusu sormak hedefi ıskalar.

Madde güçlüğü, sorunun ne kadar zor olduğudur; ayırt edicilik, sorunun bilen ile bilmeyeni ne kadar ayırdığıdır. İyi bir sınav farklı güçlükte maddeler karışımıdır.

İpucu: YZ'den soru isterken hedef kavram yanılgısını siz söyleyin: "çeldiriciler şu 3 yaygın yanılgıya dayansın" deyin. Böylece rastgele değil, öğretici çeldiriciler alırsınız.

Soru türleri

Çoktan seçmeli: Hızlı ölçer, otomatik puanlanır; ama üst düzey düşünmeyi ölçmek için özenli tasarım ister. Açık uçlu / kısa cevap: Öğrencinin kendi ifadesini gösterir; rubrikle (6. ünite) puanlanır. Doğru-yanlış: Hızlı ama şans faktörü yüksek. Eşleştirme: Kavram-tanım ilişkisi için iyi. Üst düzey düşünme soruları: Senaryo temelli, "neden/nasıl/değerlendir" soran maddeler; analiz-değerlendirme kazanımlarını ölçer. YZ hepsinin taslağını üretir; sizin işiniz hangi türün hangi kazanımı ölçtüğünü seçmek.

Adım adım: YZ ile quiz üretimi

  1. Kazanımı ve Bloom düzeyini ver. Soru o düzeyi ölçmeli.
  2. Tür ve sayı belirt. "6 çoktan seçmeli + 2 açık uçlu".
  3. Çeldirici stratejisini söyle. Hangi kavram yanılgılarına dayansın.
  4. Anahtar ve gerekçe iste. Her sorunun doğru cevabı ve neden diğerlerinin yanlış olduğu.
  5. Anahtarı elle doğrula. Her soruyu kendiniz çözün; YZ'nin işaretlediği doğru gerçekten doğru mu.
  6. Hiza ve yanlılık denetimi. Soru kazanımı mı ölçüyor; kültürel/cinsiyet yanlılığı var mı.
  7. Güçlük dengesi. Kolay-orta-zor karışımını ayarlayın.

Üç mini vaka

Vaka 1 — Yanlış anahtar. Bir fen öğretmeni YZ'den 10 soruluk quiz aldı. 3. sorunun anahtarı "B" işaretlenmişti ama öğretmen çözünce doğru cevabın "C" olduğunu gördü — YZ kendi çeldiricisini doğru sanmıştı. Öğretmen düzeltmeseydi bilen öğrenciyi yanlış sayacaktı. Anahtarı elle çözmek tüm quizi kurtardı.

Vaka 2 — Zayıf çeldirici düzeltme. Bir öğretmenin ilk quizinde çeldiriciler saçmaydı, öğrenciler doğruyu eleyerek buluyordu. YZ'ye "çeldiriciler şu yaygın yanılgılara dayansın: X, Y, Z" diye yeniden ürettirdi. Yeni quizde ayırt edicilik arttı; sınıf ortalaması gerçek öğrenmeyi daha iyi yansıttı.

Vaka 3 — Kazanım hizası. Bir tarih öğretmeninin kazanımı analiz düzeyindeydi ("nedenleri ilişkilendirir") ama YZ hatırlama soruları ("tarihi söyle") üretti. Öğretmen istemi "kazanım analiz düzeyinde; sebep-sonuç ilişkisi kurduran senaryo soruları iste" diye güncelledi. Sorular kazanımı ölçer hâle geldi.

Kopyalanabilir şablonlar

1) Kazanıma bağlı çoktan seçmeli set:

Rolün: [branş] öğretmeni. Kazanım: "[kazanım]" ([Bloom düzeyi]),[X. sınıf]. Bu kazanımı ölçen 6 çoktan seçmeli soru yaz.Her sorunun 4 seçeneği olsun; çeldiriciler şu yaygın kavramyanılgılarına dayansın: [yanılgıları yaz].Her soru için doğru cevabı ve HER seçeneğin neden doğru/yanlışolduğunu ayrı bir anahtar bölümünde açıkla. Kolay-orta-zor karışık.

2) Cevap anahtarı doğrulama:

Aşağıdaki çoktan seçmeli soruları tek tek çöz. Her soru için:(a) senin bulduğun doğru cevap, (b) gerekçesi, (c) işaretlianahtarla uyuşuyor mu. Uyuşmayanları açıkça "ÇELİŞKİ" diye işaretle.Sorular ve anahtar: [yapıştır]

3) Üst düzey (senaryo) sorusu:

"[konu]", [X. sınıf], analiz-değerlendirme düzeyinde 3 senaryotemelli soru yaz. Her soru kısa bir durum versin ve öğrencidengerekçelendirme/karşılaştırma istesin. Ezberle çözülemesin.Örnek cevap ve değerlendirme ipuçlarını ekle.

4) Yanlılık ve uygunluk denetimi:

Aşağıdaki soruları şu açılardan denetle: cinsiyet/kültür/bölgeyanlılığı, belirli bir gruba haksız avantaj/dezavantaj, yaşauygunsuz bağlam. Sorunlu maddeleri işaretle ve tarafsız biralternatif öner. Sorular: [yapıştır]

Zayıf prompt / Güçlü prompt

Zayıf prompt:

Kesirlerle ilgili 10 soru yaz.

Düzey, kazanım, tür, çeldirici stratejisi, anahtar yok; kalitesi ve hizası şansa kalır.

Güçlü prompt:

Rolün: matematik öğretmeni. Kazanım: "Öğrenci paydaları farklı ikikesri toplar" (uygulama). 5. sınıf. 6 çoktan seçmeli soru, 4 seçenek.Çeldiriciler şu yanılgılara dayansın: payları da paydaları dadoğrudan toplama, payı sabit tutup paydayı toplama. Her soru içinanahtar ve seçenek açıklaması ver. Kolay-orta-zor karışık olsun.

Soru türü

Ölçtüğü düzey

Güçlü yön

Dikkat

Çoktan seçmeli

Her düzey (tasarıma bağlı)

Hızlı, otomatik puan

Çeldirici kalitesi

Açık uçlu

Anlama-yaratma

Özgün ifade

Rubrik gerekir

Doğru-yanlış

Hatırlama

Çok hızlı

Şans faktörü yüksek

Senaryo temelli

Analiz-değerlendirme

Ezberi engeller

Yazımı zor, YZ yardımcı

Sık yapılan hatalar

  • Anahtarı doğrulamamak. En sık ve en adaletsiz hata; YZ yanlış anahtar üretir, bilen öğrenci mağdur olur.
  • Saçma çeldirici. Akla yatkın olmayan seçenek soruyu bedavaya kolaylaştırır.
  • Kazanım-düzey uyumsuzluğu. Analiz kazanımına hatırlama sorusu; hedefi ıskalar.
  • İpucu veren dil. En uzun/en ayrıntılı seçeneğin hep doğru olması öğrenciye kalıp öğretir.
  • Yanlılığı gözden kaçırmak. Belli bir kültüre/gruba tanıdık bağlam bazı öğrencilere haksız avantaj verir.
Dikkat: YZ bazen "doğru" olarak birden fazla seçeneğin savunulabildiği belirsiz sorular üretir. Her maddeyi "tek ve tartışmasız bir doğru var mı?" diye sınayın; yoksa kökü netleştirin.

Özetle

İyi soru, net bir kök ve akla yatkın çeldiricilerle kazanımın düzeyini ölçer. YZ, kazanıma bağlı çok sayıda soru taslağını, çeldiricileri ve anahtarı hızla üretir; hedef kavram yanılgılarını siz söylerseniz çeldiriciler öğretici olur. Ancak YZ yanlış anahtar, zayıf çeldirici, kazanım dışı veya yanlı soru üretebilir. Her maddeyi çözerek anahtarı doğrulayın, hizayı ve yanlılığı denetleyin; nihai sınav öğretmenindir.

Uygulama görevi

Bir kazanım için "Kazanıma bağlı çoktan seçmeli set" şablonuyla 6 soru üretin; çeldirici stratejisini kendiniz belirtin. Sonra "Cevap anahtarı doğrulama" şablonunu kullanmadan önce her soruyu kendiniz çözün ve YZ'nin anahtarıyla karşılaştırın. Uyuşmayanları düzeltin. Son olarak sorulardan birini analiz düzeyine yükselten bir senaryo sürümü yazın.

Kontrol listesi

  • [ ] Soruları kazanımın Bloom düzeyine göre mi istedim?
  • [ ] Çeldiricileri gerçek kavram yanılgılarına dayandırdım mı?
  • [ ] Her sorunun anahtarını kendim çözerek doğruladım mı?
  • [ ] Tek ve tartışmasız bir doğru cevap olduğundan emin miyim?
  • [ ] Yanlılık ve yaş uygunluğu denetimini yaptım mı?