การผลิตคำถามและแบบทดสอบ: การเขียนรายการและคุณภาพการเบี่ยงเบนความสนใจ

กำไร:

• ความสามารถในการสร้างคำถามการคิดแบบปรนัย ปลายเปิด และระดับสูงขึ้น ซึ่งสอดคล้องกับความสำเร็จด้วยการสนับสนุนด้านปัญญาประดิษฐ์
• ความสามารถในการควบคุมคุณภาพของคำถามโดยใช้หลักการของสิ่งรบกวนสมาธิที่ดี (ตัวเลือกที่ผิดแต่เป็นไปได้) คำตอบที่ถูกต้องเพียงข้อเดียว และความยากของรายการ
• เข้าใจความเสี่ยงที่ปัญญาประดิษฐ์จะสร้างคีย์คำตอบที่ไม่ถูกต้อง คำถามที่ไม่มีวัตถุประสงค์หรือลำเอียง และสามารถดูได้ว่าครูต้องตรวจสอบแต่ละรายการ

การสอบและแบบทดสอบเป็นเครื่องมือหลักที่ครูใช้วัดการเรียนรู้ แต่การเขียนคำถามที่ดีนั้นยากกว่าที่คุณคิด รากศัพท์ที่คลุมเครือ ตัวเลือกที่คล้ายกัน และภาษาที่ให้เบาะแสทำให้ค่าการวัดของคำถามลดลง AI สร้างโครงร่างคำถามที่เกี่ยวข้องกับผลลัพธ์จำนวนมากอย่างรวดเร็ว คุณตรวจสอบคุณภาพ ตรวจสอบคีย์คำตอบ และรักษาระดับความสำเร็จ ในหน่วยนี้ เราจะพูดถึงการเขียนบทความที่ดีและการผลิตแบบทดสอบคุณภาพด้วย AI ขีดจำกัดมีความชัดเจน: AI สามารถสร้างคีย์คำตอบที่ไม่ถูกต้อง คำถามที่ไม่มีวัตถุประสงค์หรือลำเอียง ครูตรวจสอบแต่ละรายการ

กายวิภาคศาสตร์ของสสารและหลักการของคำถามที่ดี

คำถามแบบปรนัยมีสองส่วน: ก้าน (ก้านคำถาม) — ประเด็นหลักที่ถูกถาม; และทางเลือกต่างๆ — หนึ่งคือคำตอบที่ถูกต้อง ส่วนอีกอันคือสิ่งรบกวนสมาธิ สิ่งรบกวนสมาธิที่ดี แม้ว่าจะผิด แต่ก็ดูเป็นไปได้สำหรับนักเรียนที่ยังไม่เชี่ยวชาญวิชานี้อย่างเต็มที่ โดยทั่วไปจะขึ้นอยู่กับความเข้าใจผิดทั่วไป ความเข้าใจผิดที่พบบ่อย เช่น "ดวงจันทร์ผลิตแสงเอง" เป็นสิ่งรบกวนสมาธิอันทรงพลัง สิ่งรบกวนสมาธิที่ไร้สาระหรือไม่เกี่ยวข้อง ("พระจันทร์คือเนยแข็ง") ทำให้คำถามง่ายขึ้นและทำให้โดดเด่นน้อยลง

หลักการของคำถามที่ดี: (1) ก้านถามอะไรที่ชัดเจนและชัดเจน; (2) มีคำตอบที่ถูกต้องเพียงคำตอบเดียวเท่านั้น (3) ตัวเลือกมีความยาวใกล้เคียงกันและเข้ากันได้กับรากทางไวยากรณ์ (ตัวเลือกที่ยาวกว่านั้นโดยทั่วไปถูกต้อง อย่าให้เบาะแส) (4) หลีกเลี่ยงตัวเลือก “ทั้งหมด/ไม่มี” หากเป็นไปได้ (5) หากก้านเป็นลบ (“ไม่ใช่”) ให้เน้นย้ำ (6) คำถามวัดระดับความสำเร็จ การถามคำถามเพื่อระลึกถึงความสำเร็จในการวิเคราะห์ถือว่าพลาดเป้า

ความยากของรายการคือความยากของคำถาม การเลือกปฏิบัติคือคำถามที่แยกผู้รู้ออกจากผู้ที่ไม่รู้มากน้อยเพียงใด ข้อสอบที่ดีคือการผสมผสานข้อสอบที่มีความยากต่างกันไป

เคล็ดลับ: เมื่อถามคำถามจาก AI ให้ตั้งชื่อความเข้าใจผิดที่เป็นเป้าหมาย: พูดว่า "ผู้เบี่ยงเบนความสนใจควรอิงจากความเข้าใจผิดทั่วไป 3 ประการนี้" วิธีนี้จะทำให้คุณได้รับสิ่งรบกวนสมาธิในการสอน ไม่ใช่สิ่งสุ่มๆ

ประเภทคำถาม

ปรนัย: การวัดอย่างรวดเร็ว ให้คะแนนโดยอัตโนมัติ แต่การวัดผลการคิดขั้นสูงต้องใช้การออกแบบอย่างรอบคอบ คำตอบปลายเปิด/สั้น: แสดงรายการข้อความของนักเรียนเอง มีคะแนนเป็นรูบริก (หน่วยที่ 6) จริง-เท็จ: รวดเร็วแต่มีปัจจัยโชคสูง การจับคู่: เหมาะสำหรับความสัมพันธ์ที่มีการกำหนดแนวคิด คำถามการคิดขั้นสูง: รายการตามสถานการณ์ถามว่า "ทำไม/อย่างไร/ประเมิน"; มันวัดผลกำไรจากการวิเคราะห์และประเมินผล AI สร้างพิมพ์เขียวสำหรับพวกเขาทั้งหมด งานของคุณคือเลือกประเภทที่จะวัดผลลัพธ์

ทีละขั้นตอน: การผลิตแบบทดสอบด้วย AI

1. ให้ระดับกำไรและบลูม คำถามควรวัดระดับนั้น
2. ระบุประเภทและจำนวน "6 หลายตัวเลือก + 2 เปิดปลาย"
3. ตั้งชื่อกลยุทธ์การเบี่ยงเบนความสนใจ. ควรตั้งอยู่บนพื้นฐานความเข้าใจผิดประการใด?
4. ขอกุญแจและเหตุผล คำตอบที่ถูกต้องสำหรับคำถามแต่ละข้อและเหตุใดคำถามอื่นจึงผิด
5. ตรวจสอบคีย์ด้วยตนเอง ตอบคำถามแต่ละข้อด้วยตัวเอง เส้นที่ AI ทำเครื่องหมายไว้เป็นจริงหรือไม่?
6. การตรวจสอบการจัดตำแหน่งและอคติ คำถามวัดได้กำไรหรือไม่? มีอคติทางวัฒนธรรม/เพศหรือไม่?
7. ความสมดุลของความยากลำบาก ปรับส่วนผสมง่าย-ปานกลาง-ยาก

มินิเคสสามอัน

กรณีที่ 1 — รหัสผิด ครูวิทยาศาสตร์ทำแบบทดสอบ 10 คำถามจาก AI กุญแจสำคัญของคำถามข้อที่ 3 มีเครื่องหมาย "B" แต่เมื่อครูเฉลยคำตอบแล้วพบว่าคำตอบที่ถูกต้องคือ "C" โดย AI คิดว่าสิ่งที่กวนใจตัวเองนั้นถูกต้อง ถ้าครูไม่แก้ไขเขา เขาคงจะถือว่านักเรียนที่รู้ว่าผิด การไขกุญแจด้วยมือจะบันทึกแบบทดสอบทั้งหมด

กรณีที่ 2 — การแก้ไขสิ่งรบกวนสมาธิที่อ่อนแอ ในแบบทดสอบแรกของครู ผู้รบกวนสมาธิเป็นเรื่องไร้สาระ และนักเรียนต้องกำจัดและค้นหาคำตอบที่ถูกต้อง เขามี AI ทำซ้ำ "สิ่งรบกวนสมาธิตามความเข้าใจผิดทั่วไปเหล่านี้: X, Y, Z" การเลือกปฏิบัติเพิ่มขึ้นในแบบทดสอบใหม่ ค่าเฉลี่ยของชั้นเรียนสะท้อนถึงการเรียนรู้จริงได้ดีกว่า

กรณีที่ 3 — ได้รับการจัดตำแหน่ง ผลลัพธ์ของครูสอนประวัติศาสตร์อยู่ที่ระดับการวิเคราะห์ ("เกี่ยวข้องกับสาเหตุ") แต่ AI ทำให้เกิดคำถามในการเรียกคืน ("บอกวันที่") ครูอัปเดตข้อความแจ้งเป็น "ในระดับการวิเคราะห์การได้มา ถามคำถามสถานการณ์ที่สร้างความสัมพันธ์ระหว่างเหตุและผล" คำถามได้กลายเป็นตัวชี้วัดความสำเร็จ

เทมเพลตที่คัดลอกได้

1) ชุดตัวเลือกปรนัยตามความสำเร็จ:

บทบาทของคุณ: [วิชา] ครู กำไร: "[กำไร]" ([ระดับบลูม]),[X. ระดับ]. เขียนคำถามแบบเลือกตอบ 6 ข้อเพื่อวัดผลลัพธ์นี้ ให้แต่ละคำถามมี 4 ทางเลือก ให้ผู้เบี่ยงเบนความสนใจอยู่บนพื้นฐานของความเข้าใจผิดที่พบบ่อยเหล่านี้: [เขียนความเข้าใจผิด] สำหรับแต่ละคำถาม ให้อธิบายคำตอบที่ถูกต้องและเหตุใดตัวเลือกแต่ละข้อจึงเป็นจริง/เท็จในส่วนสำคัญที่แยกจากกัน ผสมง่าย-ปานกลาง-ยาก

2) ตอบการยืนยันคีย์:

แก้คำถามแบบเลือกตอบด้านล่างทีละข้อ สำหรับคำถามแต่ละข้อ: (a) คำตอบที่ถูกต้องที่คุณพบ (b) เหตุผล (c) ตรงกับคีย์ที่ทำเครื่องหมายไว้หรือไม่ ทำเครื่องหมายความไม่สอดคล้องกันอย่างชัดเจนว่า "ขัดแย้ง" คำถามและรหัส: [วาง]

3) คำถามระดับสูง (สถานการณ์):

"[เรื่อง]", [X. class] เขียนคำถามตามสถานการณ์ 3 ข้อในระดับการวิเคราะห์และประเมินผล ให้แต่ละคำถามให้สถานการณ์สั้นๆ และขอให้นักเรียนให้เหตุผล/เปรียบเทียบ อย่าให้มันแก้ได้ด้วยใจ เพิ่มตัวอย่างคำตอบและเคล็ดลับการประเมิน

4) อคติและการตรวจสอบการปฏิบัติตาม:

ตรวจสอบคำถามต่อไปนี้: อคติทางเพศ/วัฒนธรรม/ภูมิภาค ข้อได้เปรียบ/เสียเปรียบที่ไม่ยุติธรรมต่อกลุ่มใดกลุ่มหนึ่ง บริบทที่ไม่เหมาะสม ทำเครื่องหมายรายการที่เป็นปัญหาและเสนอทางเลือกที่เป็นกลาง คำถาม: [วาง]

พรอมต์อ่อน / พรอมต์แข็งแกร่ง

พรอมต์ที่อ่อนแอ:

เขียนคำถาม 10 ข้อเกี่ยวกับเศษส่วน

ระดับ ผลลัพธ์ ประเภท กลยุทธ์ในการเบี่ยงเบนความสนใจ ไม่มีกุญแจสำคัญ คุณภาพและการจัดตำแหน่งเป็นเรื่องของโอกาส

พรอมต์อันทรงพลัง:

บทบาทของคุณ: ครูคณิตศาสตร์ ผลการเรียนรู้: "นักเรียนบวกเศษส่วนสองตัวที่มีตัวส่วนต่างกัน" (ใบสมัคร) ชั้นประถมศึกษาปีที่ 5 6 คำถามปรนัย 4 ตัวเลือก สิ่งที่กวนใจควรอยู่บนพื้นฐานความเข้าใจผิดต่อไปนี้: การบวกทั้งเศษและส่วนโดยตรง ทำให้ตัวเศษคงที่และการบวกตัวส่วน ให้คำอธิบายคีย์และตัวเลือกสำหรับคำถามแต่ละข้อ ผสมง่าย-ปานกลาง-ยาก

ประเภทคำถาม

ระดับที่มันวัด

ความแข็งแรง

ความสนใจ

หลายทางเลือก

ระดับใดก็ได้ (ขึ้นอยู่กับการออกแบบ)

คะแนนที่รวดเร็วและอัตโนมัติ

คุณภาพที่เสียสมาธิ

เปิดสิ้นสุด

การสร้างความเข้าใจ

การแสดงออกดั้งเดิม

จำเป็นต้องมีรูบริก

จริง-เท็จ

จำไว้

เร็วมาก

ปัจจัยโชคลาภอยู่ในระดับสูง

ตามสถานการณ์

การวิเคราะห์-ประเมินผล

ป้องกันการท่องจำ

การสะกดคำเป็นเรื่องยาก AI ช่วยได้

ข้อผิดพลาดทั่วไป

• ไม่ตรวจสอบคีย์ ข้อผิดพลาดที่พบบ่อยที่สุดและไม่ยุติธรรมที่สุด AI สร้างคีย์ผิด นักเรียนที่รู้จะตกเป็นเหยื่อ
• สิ่งรบกวนสมาธิที่ไร้สาระ ตัวเลือกที่ไม่น่าเชื่อทำให้คำถามง่ายขึ้นฟรี
• ระดับกำไรไม่ตรงกัน จดจำคำถามสำหรับการได้มาซึ่งการวิเคราะห์ พลาดเป้าหมาย
• ภาษาที่ให้เบาะแส ความจริงที่ว่าตัวเลือกที่ยาวที่สุด/ละเอียดที่สุดนั้นถูกต้องเสมอจะสอนรูปแบบของนักเรียน
• มองข้ามอคติ. บริบทที่คุ้นเคยของวัฒนธรรม/กลุ่มใดกลุ่มหนึ่งทำให้นักเรียนบางคนได้รับข้อได้เปรียบอย่างไม่ยุติธรรม

ข้อควรระวัง: บางครั้ง AI ก่อให้เกิดคำถามคลุมเครือซึ่งสามารถโต้แย้งได้ว่า "ถูกต้อง" มากกว่าหนึ่งตัวเลือก เขาตอบแต่ละรายการด้วยคำถามว่า "มีความจริงข้อเดียวและเถียงไม่ได้หรือไม่" ทดสอบด้วยการพูดว่า; มิฉะนั้นให้ชี้แจงราก

โดยสรุป

คำถามที่ดีจะวัดระดับของความสำเร็จด้วยต้นกำเนิดที่ชัดเจนและสิ่งรบกวนที่น่าเชื่อถือ AI สร้างโครงร่างคำถาม สิ่งรบกวน และกุญแจจำนวนมากอย่างรวดเร็วซึ่งขึ้นอยู่กับการได้มา หากคุณบอกความเข้าใจผิดของเป้าหมาย ผู้เบี่ยงเบนความสนใจจะเป็นผู้ให้คำแนะนำ อย่างไรก็ตาม AI อาจสร้างคีย์ที่ไม่ถูกต้อง สิ่งรบกวนสมาธิที่อ่อนแอ คำถามที่ไม่คุ้นเคย หรือคำถามที่มีอคติ แก้ไขแต่ละรายการเพื่อตรวจสอบคีย์ ตรวจสอบการจัดตำแหน่งและอคติ การทดสอบครั้งสุดท้ายเป็นของครู

งานสมัคร

สำหรับผลลัพธ์ ให้สร้างคำถาม 6 ข้อด้วยเทมเพลต "ชุดตัวเลือกหลายข้อตามผลลัพธ์" ระบุกลยุทธ์การเบี่ยงเบนความสนใจด้วยตัวคุณเอง จากนั้นแก้คำถามแต่ละข้อด้วยตัวเองแล้วเปรียบเทียบกับคีย์ของ AI ก่อนที่จะใช้เทมเพลต "การยืนยันคีย์คำตอบ" แก้ไขข้อมูลที่ไม่ตรงกัน สุดท้าย ให้เขียนเวอร์ชันของสถานการณ์จำลองที่ยกระดับคำถามข้อใดข้อหนึ่งไปสู่ระดับการวิเคราะห์

รายการตรวจสอบ

• [ ] ฉันถามคำถามตามระดับ Bloom ของผลการเรียนรู้หรือไม่?
• [ ] ฉันยึดถือสิ่งที่รบกวนจิตใจจากความเข้าใจผิดที่เกิดขึ้นจริงหรือไม่?
• [ ] ฉันได้ตรวจสอบกุญแจของคำถามแต่ละข้อด้วยการแก้ไขด้วยตนเองหรือไม่
• [ ] ฉันแน่ใจว่ามีคำตอบเดียวที่ถูกต้องอย่างไม่ต้องสงสัย?
• [ ] ฉันได้ตรวจสอบอคติและความเหมาะสมของอายุแล้วหรือยัง?