واحد 8 / 11

تولید سوال و آزمون

سود:

  • توانایی هوش مصنوعی تولید سوالات چند گزینه ای، حواس پرتی بر اساس خطاهای معمولی و کلیدهای راه حل با تعیین موضوع، سطح و توزیع دشواری.
  • امکان شناسایی خطاهای کلید اشتباه و چندین/صفر گزینه صحیح با اعتبارسنجی مستقل هر کلید پرسش و پاسخ، ترجیحا به صورت انبوه، با SymPy
  • امکان ارزیابی کیفیت عوامل حواس پرتی، عدم ابهام و تراز دشواری سوالات و تایید هر سوال قبل از شرکت در آزمون.

تهیه سؤالات امتحانی و تمرینی یکی از وقت گیرترین کارها در آموزش ریاضی است: تنظیم سؤالات با دشواری مناسب، طراحی حواس پرتی معقول (گزینه های اشتباه اما قابل قبول)، آماده کردن کلید پاسخ و متعادل کردن دشواری ساعت ها طول می کشد. هوش مصنوعی می‌تواند این فرآیند را تسریع بخشد – ایجاد ده‌ها تنوع سؤال، گزینه‌های چند گزینه‌ای و کلیدهای راه‌حل از یک موضوع. اما صحت هر سؤال تولید شده و بدون خطا بودن هر کلید پاسخ باید مستقلاً تأیید شود. یک کلید نادرست به این معنی است که دانش آموزان به طور ناعادلانه امتیاز از دست می دهند. در این بخش شما یاد خواهید گرفت که چگونه از هوش مصنوعی به عنوان شریک تولید سوال استفاده کنید و چگونه هر سوال را تعدیل کنید.

چند تعریف حواس پرتی گزینه ای در یک سوال چند گزینه ای است که صحیح نیست اما با اشتباه رایجی که دانش آموز ممکن است انجام دهد مطابقت دارد. یک حواس پرتی خوب تصادفی نیست. یک خطای معمولی را منعکس می کند (خطای علامت، سردرگمی قانون). کلید پاسخ لیستی از پاسخ های صحیح به سوالات است. تراز دشواری توزیع مناسب سوالات آسان-متوسط-سخت در یک امتحان است.

سهم هوش مصنوعی در ایجاد سوال

  • تنوع سوال: چندین سوال مشابه از یک الگو (تغییر اعداد).
  • طراحی حواس‌پرتی: انتخاب‌های احتمالی نادرست بر اساس خطاهای رایج.
  • طرح کلی راه حل: راه حل گام به گام برای هر مشکل.
  • درجه سختی: طبقه بندی سوالات به عنوان آسان / متوسط ​​/ دشوار.
  • پوشش موضوعی: مجموعه سوالاتی که موضوعات فرعی مختلف یک برنامه درسی را پوشش می دهد.
  • تناسب تاکسونومی بلوم: سؤال با توجه به سطوح شناختی مانند به خاطر سپردن، اعمال، تجزیه و تحلیل.

گام به گام: ایجاد مجموعه ای مطمئن از سوالات

1. موضوع، سطح و تعداد سوالات را مشخص کنید. مانند "پایه دهم دبیرستان معادلات درجه دوم 10 سوال چند گزینه ای".

2. نوع سوال و توزیع دشواری را بپرسید. توزیعی مانند "4 آسان، 4 متوسط، 2 سخت" را بخواهید.

3. هر سوال را مستقل حل کنید. هر سوال را خودتان یا با SymPy حل کنید. آن را با کلید پاسخ ارائه شده توسط YZ مقایسه کنید. این مرحله غیر قابل مذاکره است.

4. عوامل حواس پرتی را بررسی کنید. آیا گزینه های اشتباه واقعا اشتباه هستند؟ گاهی اوقات هوش مصنوعی بیش از یک گزینه صحیح تولید می کند، یا یک حواس پرتی در واقع درست است. هر گزینه را علامت بزنید.

5. تضمین وجود دارد دقیقا یک پاسخ درست است. در چند گزینه ای، دقیقاً یک گزینه باید صحیح باشد. نباید صفر یا بیشتر از یک درست باشد.

6. عدم قطعیت و تکراری بودن را بررسی کنید. آیا سوال یکجانبه است؟ آیا دو سوال یکسان را می سنجند؟ آیا اعداد معقول هستند (به عنوان مثال اگر ریشه باید منفی باشد)؟

توجه: هوش مصنوعی هنگام ایجاد سؤالات چند گزینه ای دو اشتباه رایج را مرتکب می شود: (1) گزینه ای که "درست" را علامت گذاری کرده است در واقع اشتباه است، (2) بیش از یک گزینه صحیح است یا هیچ یک از آنها درست نیست. از هیچ سوالی بدون حل هر سوال به طور مستقل و ارزیابی هر یک از چهار گزینه به طور جداگانه به عنوان صحیح / نادرست استفاده نکنید.

نمودار کنترل کیفیت سوال

کنترل کنید

سوال

چه چیزی را جستجو کنیم

دقت

آیا کلید پاسخ صحیح است؟

تایید با راه حل مستقل

فقط درسته

آیا فقط 1 گزینه صحیح است؟

3 تای دیگه باید اشتباه باشه

کیفیت حواس پرتی

آیا اشتباهات قابل قبول هستند؟

باید بر اساس خطای معمولی باشد

وضوح

آیا سوال یکجانبه است؟

هیچ ابهامی نباید وجود داشته باشد

انطباق سطح

آیا سختی با هدف مناسب است؟

نه خیلی آسان و نه خیلی سخت

دامنه

آیا موضوع به خوبی ارائه شده است؟

موضوعات فرعی متعادل هستند

سه کیف کوچک

مورد 1 - کلید اشتباه است. یک معلم مجموعه ای چند گزینه ای از 12 سوال تهیه کرد. هنگامی که او هر سوال را با SymPy حل کرد، متوجه شد که در 3 سوال از 12 سوال، گزینه ای که هوش مصنوعی "درست" را علامت زده بود نادرست است - پاسخ صحیح واقعی گزینه دیگری بود. معلم کلیدها را صاف کرد. اگر از این مجموعه بدون تایید استفاده می شد، کل کلاس در 3 سوال ناعادلانه ارزیابی می شد.

مورد 2 - دو گزینه صحیح. در یک سوال، هوش مصنوعی هر دو عبارت "x = 2" و "x = 2 یا x = -2" را قرار داده است. هر دو به یک معنا درست بودند و سوال نامشخص بود. معلم گزینه ها را دوباره مرتب کرد و فقط یک پاسخ صحیح باقی گذاشت. عوامل حواس پرتی باید به وضوح نادرست باشند.

مورد 3 - حواس پرتی ضعیف. در یک کلاس مهندسی، هوش مصنوعی عوامل بی ربطی مانند "42"، "aksaray"، "آبی"، "17" و غیره را در یک سوال قرار داد. پاسخ صحیح بدیهی است "17". معلم بر اساس خطاهای محاسباتی معمولی (مثلاً مقدار ناشی از خطای علامت) حواس‌پرده‌های عددی را درخواست کرد و سؤالات به تمایز واقعی تبدیل شدند. حواس پرتی خوب نشان دهنده یک مسیر نادرست واقعی است.

چهار قالب قابل کپی

1) مجموعه سوالات چند گزینه ای:

[n] سوال با انتخاب چندگانه در مورد [موضوع] ایجاد کنید. سطح: [سطح]. سختی: [x آسان، y متوسط، z سخت]. بگذارید هر سوال 4 گزینه داشته باشد. بگذارید EXACT 1 صحیح باشد و 3 مورد دیگر بر اساس خطاهای معمولی حواس پرتی قابل قبول باشند. همچنین برای هر سوال راه حل و پاسخ صحیح را گام به گام بنویسید. من همه آنها را با SymPy تأیید خواهم کرد.

2) تنوع سوال (از الگو):

این سوال را به عنوان PATTERN در نظر بگیرید: [نمونه سوال]. [n] نسخه‌های مختلف با اندازه‌گیری یک مفهوم اما با اعداد/زمینه متفاوت تولید کنید. پاسخ های هر نسخه را مرحله به مرحله حل کنید. بگذارید پاسخ ها با یکدیگر متفاوت باشند.

3) تولید کلید راه حل:

برای هر یک از سوالات زیر یک راه حل گام به گام و پاسخ نهایی تهیه کنید. قانون مورد استفاده خود را مشخص کنید. راه حلی را که مطمئن نیستید علامت بزنید. من به طور مستقل هر پاسخ را تأیید می کنم. سوالات: [اینجا]

4) بهبود حواس پرت کننده:

عوامل حواس پرتی را برای این سوال چند گزینه ای مرور کنید. توضیح دهید که هر یک از حواس پرتی نادرست مربوط به کدام خطای معمولی دانش آموز است. حواس پرت کننده های نامربوط یا نادرست آشکار را با مواردی که بر اساس خطاهای واقعی هستند جایگزین کنید. سوال: [اینجا]

اعلان ضعیف / اعلان قوی

ضعیف: "10 سوال مشتق را برای من انجام دهید."
نتیجه: سطح نامشخص، توزیع دشواری تصادفی، کلید پاسخ تأیید نشده، مجموعه تصادفی حواس‌پرتی‌ها (در صورت وجود).
قوی: "10 سوال مشتق چند گزینه ای برای کلاس دوازدهم دبیرستان تولید کنید: 4 سوال آسان (قوانین پایه)، 4 متوسط ​​(قانون زنجیره/محصول)، 2 سوال دشوار (توابع مرکب). بگذارید در هر سوال 4 گزینه وجود داشته باشد، دقیقا 1 سوال درست باشد، بقیه بر اساس خطاهای معمولی حواس پرتی هستند (فراموش کردن حل خطای درونی، گام به گام پاسخ هر سوال را علامت بزنید."
نتیجه: مجموعه ای که سطح، متعادل، حواس پرت کننده باشد معنادار است و هر پاسخی قابل ممیزی است.

اشتباهات رایج

  • تأیید نشدن کلید پاسخ آنچه هوش مصنوعی می گوید "درست" است اغلب اشتباه است. هر سوال را مستقل حل کنید.
  • بیش از یک/صفر گزینه صحیحی است. در انتخاب چندگانه باید دقیقاً یک حقیقت وجود داشته باشد. هر گزینه را جداگانه بررسی کنید.
  • حواس پرتی ضعیف گزینه‌های نامربوط یا آشکارا نادرست، سؤال را نامشخص می‌سازد.
  • عدم تعیین توزیع دشواری. به نظر می رسد که همه آنها یک سختی دارند. ارزیابی سطح نمی تواند انجام شود.
  • تکرار و همپوشانی. سؤالات مختلف ممکن است یک مفهوم را اندازه گیری کنند. تعادل پوشش را بررسی کنید.
  • بیان مبهم سوالات با معانی دوگانه به طور ناعادلانه دانش آموزان را گمراه می کند.
نکته: کارآمدترین راه برای تأیید اعتبار مجموعه ای از سؤالات، نوشتن کدی است که همه سؤالات را یکجا با SymPy حل کند. به هوش مصنوعی بگویید "کدی بنویسد که هر یک از این 10 مشکل را با SymPy حل کند"، کد را اجرا کنید و نتایج SymPy را به صورت انبوه با کلید پاسخ AI مقایسه کنید. به این ترتیب 10 سوال را نه یک به یک بلکه به صورت جمعی و قطعی بررسی می کنید.

به طور خلاصه

هوش مصنوعی به طرز چشمگیری سرعت تولید سوالات ریاضی و امتحانات را افزایش می دهد: تنوع سوال، طراحی حواس پرتی، کلید راه حل، درجه سختی. اما هر سؤال و هر کلید پاسخ باید به طور مستقل تأیید شود - ترجیحاً به صورت انبوه با SymPy تأیید شود. رایج ترین خطاها عبارتند از: کلید پاسخ اشتباه، گزینه های صحیح چند/صفر و حواس پرتی ضعیف. تعیین موضوع، سطح و توزیع سختی از ابتدا باعث افزایش کیفیت می شود. هرگونه سوال تایید نشده نباید وارد آزمون شود.

وظیفه کاربردی

موضوعی را انتخاب کنید. از هوش مصنوعی بخواهید 8-10 سوال چند گزینه ای + راه حل با توزیع دشواری مشخص با الگوی اول تولید کند. سپس، با یادآوری واحد 4، از هوش مصنوعی بخواهید یک کد بنویسد که تمام سوالات را با SymPy حل کند و کد را اجرا کنید. نتایج SymPy را با کلید پاسخ YZ مقایسه کنید. بررسی کنید که در هر سؤال دقیقاً یک انتخاب صحیح وجود دارد و عوامل حواس پرتی در واقع نادرست هستند. حداقل یک خطا یا حواس پرتی ضعیف را پیدا و تصحیح کنید.

چک لیست

  • [ ] من به وضوح موضوع، سطح و توزیع دشواری را بیان کرده ام.
  • [ ] من هر سوال را به طور مستقل حل کردم (ترجیحا دسته ای با SymPy).
  • [ ] من کلید پاسخ را با نتایج SymPy مقایسه کردم.
  • [ ] من تأیید کردم که در هر سؤال دقیقاً یک گزینه صحیح وجود دارد.
  • [ ] بررسی کردم که حواس پرتی ها بر اساس خطاهای معمولی بوده و در واقع اشتباه بوده اند.
  • [ ] مطمئن شدم که هیچ عبارات مبهم و سؤالات تکراری وجود ندارد.