Κέρδη:
- Δυνατότητα τεχνητής νοημοσύνης να παράγει ερωτήσεις πολλαπλών επιλογών, διασπαστές που βασίζονται σε τυπικά σφάλματα και κλειδιά λύσης προσδιορίζοντας θέμα, επίπεδο και κατανομή δυσκολίας.
- Δυνατότητα σύλληψης λάθος κλειδιού και πολλαπλών/μηδενικών σωστών σφαλμάτων επιλογής επικυρώνοντας ανεξάρτητα κάθε κλειδί ερώτησης και απάντησης, κατά προτίμηση μαζικά, με το SymPy
- Δυνατότητα αξιολόγησης της ποιότητας των διασπαστών, της σαφήνειας και του ισοζυγίου δυσκολίας των ερωτήσεων και έγκρισης κάθε ερώτησης πριν από τη λήψη της εξέτασης.
Η προετοιμασία ερωτήσεων για εξετάσεις και εξάσκηση είναι μία από τις πιο χρονοβόρες εργασίες στην εκπαίδευση των μαθηματικών: η τοποθέτηση ερωτήσεων κατάλληλης δυσκολίας, ο σχεδιασμός εύλογων παραγόντων που αποσπούν την προσοχή (λανθασμένες αλλά εύλογες επιλογές), η προετοιμασία του κλειδιού απάντησης και η εξισορρόπηση της δυσκολίας χρειάζονται ώρες. Η τεχνητή νοημοσύνη μπορεί να επιταχύνει αυτή τη διαδικασία — δημιουργώντας δεκάδες παραλλαγές ερωτήσεων, επιλογές πολλαπλών επιλογών και κλειδιά λύσης από ένα θέμα. Ωστόσο, η ακρίβεια κάθε ερώτησης που παράγεται και η έλλειψη σφαλμάτων κάθε κλειδιού απάντησης πρέπει να επαληθεύονται ανεξάρτητα. Ένα λανθασμένο κλειδί σημαίνει ότι οι μαθητές χάνουν άδικα βαθμούς. Σε αυτή την ενότητα θα μάθετε πώς να χρησιμοποιείτε το AI ως συνεργάτη δημιουργίας ερωτήσεων και πώς να εποπτεύετε κάθε ερώτηση.
Μερικοί ορισμοί. Ο διασπαστής είναι μια επιλογή σε μια ερώτηση πολλαπλής επιλογής που δεν είναι σωστή αλλά αντιστοιχεί σε ένα κοινό λάθος που μπορεί να κάνει ο μαθητής. Ένας καλός αποσπάτης της προσοχής δεν είναι τυχαίος. Αντανακλά ένα τυπικό σφάλμα (σφάλμα πρόσημου, σύγχυση κανόνων). Το κλειδί απάντησης είναι μια λίστα με σωστές απαντήσεις στις ερωτήσεις. Ισορροπία δυσκολίας είναι η κατάλληλη κατανομή ερωτήσεων εύκολης-μέτριας δυσκολίας σε μια εξέταση.
Η συμβολή του AI στη δημιουργία ερωτήσεων
- Παραλλαγή ερώτησης: Πολλαπλές παρόμοιες ερωτήσεις από ένα μοτίβο (αλλαγή των αριθμών).
- Σχεδίαση αποσπάσματος: Εύλογα λανθασμένες επιλογές που βασίζονται σε κοινά λάθη.
- Περίγραμμα κλειδιού λύσης: Βήμα προς βήμα λύση σε κάθε πρόβλημα.
- Βαθμολογία δυσκολίας: Ταξινόμηση ερωτήσεων ως εύκολες/μέσες/δύσκολες.
- Κάλυψη θεμάτων: Σετ ερωτήσεων που καλύπτουν διαφορετικά υποθέματα ενός αναλυτικού προγράμματος.
- Τακτοποίηση ταξινόμησης άνθισης: Ερώτηση σύμφωνα με γνωστικά επίπεδα όπως η ανάμνηση, η εφαρμογή, η ανάλυση.
Βήμα προς βήμα: δημιουργία ενός αξιόπιστου συνόλου ερωτήσεων
1. Καθορίστε το θέμα, το επίπεδο και τον αριθμό των ερωτήσεων. Όπως «10η τάξη λυκείου, εξισώσεις δευτεροβάθμιας εκπαίδευσης, 10 ερωτήσεις πολλαπλής επιλογής».
2. Ζητήστε το είδος της ερώτησης και την κατανομή δυσκολίας. Ζητήστε μια διανομή όπως "4 εύκολα, 4 μεσαία, 2 σκληρά."
3. Λύστε κάθε ερώτηση ανεξάρτητα. Λύστε κάθε ερώτηση μόνοι σας ή με το SymPy. Συγκρίνετε το με το κλειδί απάντησης που παρέχεται από την YZ. Αυτό το βήμα είναι αδιαπραγμάτευτο.
4. Ελέγξτε για περισπασμούς. Είναι όντως λάθος οι λάθος επιλογές; Μερικές φορές το AI παράγει περισσότερες από μία σωστές επιλογές ή ένας αποσπαστής είναι πραγματικά σωστός. Ελέγξτε κάθε επιλογή.
5. Εγγύηση υπάρχει ακριβώς μία σωστή απάντηση. Στην πολλαπλή επιλογή, ακριβώς μία επιλογή πρέπει να είναι σωστή. Δεν πρέπει να υπάρχουν μηδέν ή περισσότερα από ένα σωστά.
6. Ελέγξτε για αβεβαιότητα και επικάλυψη. Είναι μονοσήμαντη η ερώτηση; Οι δύο ερωτήσεις μετρούν το ίδιο πράγμα; Είναι λογικοί οι αριθμοί (π.χ. αν η ρίζα πρέπει να είναι αρνητική);
Προσοχή: Η τεχνητή νοημοσύνη κάνει δύο πιο συνηθισμένα λάθη όταν δημιουργεί ερωτήσεις πολλαπλής επιλογής: (1) η επιλογή που επισήμανε "αληθής" είναι στην πραγματικότητα λάθος, (2) περισσότερες από μία επιλογές είναι σωστές ή καμία από αυτές δεν είναι σωστή. Μην χρησιμοποιείτε καμία ερώτηση χωρίς να λύσετε κάθε ερώτηση ανεξάρτητα και να αξιολογήσετε κάθε μία από τις τέσσερις επιλογές ξεχωριστά ως αληθής/λάθος.
Γράφημα ποιοτικού ελέγχου ερωτήσεων
έλεγχος
Ερώτηση
τι να ψάξω
ακρίβεια
Είναι σωστό το κλειδί απάντησης;
Επιβεβαίωση από ανεξάρτητη λύση
μόνο αληθινό
Είναι σωστή μόνο 1 επιλογή;
Τα άλλα 3 πρέπει να κάνουν λάθος
Ποιότητα διάσπασης της προσοχής
Είναι εύλογα τα λάθη;
Θα πρέπει να βασίζεται σε τυπικό σφάλμα
Σαφήνεια
Είναι μονοσήμαντη η ερώτηση;
Δεν πρέπει να υπάρχει αβεβαιότητα
Συμμόρφωση σε επίπεδο
Είναι η δυσκολία ανάλογη του στόχου;
Ούτε πολύ εύκολο ούτε πολύ δύσκολο
Πεδίο εφαρμογής
Αντιπροσωπεύεται καλά το θέμα;
Τα υποθέματα είναι ισορροπημένα
τρεις μίνι θήκες
Περίπτωση 1 — Λάθος κλειδί. Ένας δάσκαλος δημιούργησε ένα σετ πολλαπλών επιλογών με 12 ερωτήσεις. Όταν έλυνε κάθε ερώτηση με το SymPy, διαπίστωσε ότι σε 3 από τις 12 ερωτήσεις, η επιλογή που είχε επισημάνει «σωστό» το AI ήταν λανθασμένη — η πραγματική σωστή απάντηση ήταν μια άλλη επιλογή. Ο δάσκαλος ίσιωσε τα κλειδιά. Εάν αυτό το σύνολο είχε χρησιμοποιηθεί χωρίς επαλήθευση, ολόκληρη η τάξη θα είχε αξιολογηθεί άδικα σε 3 ερωτήσεις.
Περίπτωση 2 — Δύο σωστές επιλογές. Σε μια ερώτηση, το AI έβαλε και "x = 2" και "x = 2 ή x = −2". Και τα δύο ήταν αληθινά κατά μία έννοια, και η ερώτηση ήταν ασαφής. Ο δάσκαλος αναδιάταξη των επιλογών και άφησε μόνο μία σωστή απάντηση. Τα στοιχεία που αποσπούν την προσοχή πρέπει να είναι σαφώς λανθασμένα.
Περίπτωση 3 — Αδύναμος αποσπαστής. Σε ένα μάθημα μηχανικής, το AI έβαλε σε μια ερώτηση άσχετους παράγοντες που αποσπούν την προσοχή, όπως "42", "aksaray", "μπλε", "17" κ.λπ. Η σωστή απάντηση ήταν προφανώς «17». Ο δάσκαλος ζήτησε αριθμητικά στοιχεία που αποσπούν την προσοχή με βάση τυπικά λάθη υπολογισμού (π.χ. τιμή που προκύπτει από σφάλμα προσήμου) και οι ερωτήσεις έγιναν αληθινές διακρίσεις. Ο καλός διασπαστής αντιπροσωπεύει μια αληθινή ψεύτικη διαδρομή.
Τέσσερα πρότυπα με δυνατότητα αντιγραφής
1) Σύνολο ερωτήσεων πολλαπλών επιλογών:
Δημιουργήστε [n] ερωτήσεις ΠΟΛΛΑΠΛΗΣ ΕΠΙΛΟΓΗΣ για το [θέμα]. Επίπεδο: [επίπεδο]. Δυσκολία: [x εύκολο, y μέτριο, z σκληρό]. Αφήστε κάθε ερώτηση να έχει 4 επιλογές. Αφήστε το ΑΚΡΙΒΩΣ 1 να είναι σωστό και τα άλλα 3 να είναι εύλογοι αποσπούν την προσοχή με βάση τυπικά σφάλματα. Γράψτε επίσης βήμα προς βήμα λύση και σωστή απάντηση για κάθε ερώτηση. Θα τα επαληθεύσω όλα με το SymPy.
2) Παραλλαγή ερώτησης (από μοτίβο):
Λάβετε αυτήν την ερώτηση ως PATTERN: [δείγμα ερώτησης]. Δημιουργήστε [n] διαφορετικές εκδόσεις που μετρούν την ίδια έννοια αλλά με διαφορετικούς αριθμούς/πλαίσιο. Λύστε τις απαντήσεις για κάθε έκδοση βήμα προς βήμα. Αφήστε τις απαντήσεις να είναι διαφορετικές μεταξύ τους.
3) Δημιουργία κλειδιού λύσης:
Δημιουργήστε μια λύση ΒΗΜΑ-ΒΗΜΑ και τελική απάντηση για καθεμία από τις παρακάτω ερωτήσεις. Καθορίστε τον κανόνα που χρησιμοποιείτε. Σημειώστε τη λύση για την οποία δεν είστε σίγουροι. Θα επαληθεύσω ανεξάρτητα κάθε απάντηση. Ερωτήσεις: [εδώ]
4) Βελτίωση του διασπαστή:
Ελέγξτε τους παράγοντες που αποσπούν την προσοχή για αυτήν την ερώτηση πολλαπλών επιλογών. Εξηγήστε σε ΠΟΙΟ τυπικό σφάλμα μαθητή αντιστοιχεί κάθε λανθασμένος περισπαστής. Αντικαταστήστε τους άσχετους ή προφανείς λανθασμένους παράγοντες περισπασμού με αυτούς που βασίζονται σε πραγματικά σφάλματα. Ερώτηση: [εδώ]
Αδύναμη προτροπή / Ισχυρή προτροπή
Αδύναμος: «Κάνε μου 10 παράγωγες ερωτήσεις».
Αποτέλεσμα: Αβέβαιο επίπεδο, τυχαία κατανομή δυσκολίας, μη επαληθευμένο κλειδί απάντησης, τυχαίο σύνολο περισπαστών (αν υπάρχουν).
Ισχυρή: "Δημιουργήστε 10 ερωτήσεις πολλαπλής επιλογής παραγώγων για τη 12η τάξη του λυκείου: 4 εύκολες (βασικοί κανόνες), 4 μεσαίες (κανόνας αλυσίδας/προϊόντος), 2 δύσκολες (σύνθετες συναρτήσεις). Αφήστε να υπάρχουν 4 επιλογές σε κάθε ερώτηση, ακριβώς 1 σωστή, οι υπόλοιπες είναι διασπαστές βάσει τυπικών σφαλμάτων (ξεχνώντας την εσωτερική παράγωγο και υποδείξτε την εσωτερική παράγωγο βήμα προς βήμα, υποδείξτε τη σωστή παράγωγο."
Αποτέλεσμα: Ένα σύνολο που είναι επίπεδο, ισορροπημένο, που αποσπά την προσοχή έχει νόημα και κάθε απάντηση είναι ελεγχόμενη.
Συνήθη λάθη
- Δεν επαληθεύεται το κλειδί απάντησης. Αυτό που λέει η AI ότι είναι "σωστό" είναι συχνά λάθος. Λύστε κάθε ερώτηση ανεξάρτητα.
- Περισσότερα από ένα/μηδέν είναι η σωστή επιλογή. Στην πολλαπλή επιλογή πρέπει να υπάρχει ακριβώς μία αλήθεια. Ελέγξτε κάθε επιλογή ξεχωριστά.
- Αδύναμοι παράγοντες που αποσπούν την προσοχή. Άσχετες ή προφανώς λανθασμένες επιλογές καθιστούν την ερώτηση μη διακριτική.
- Χωρίς να προσδιορίζεται η κατανομή δυσκολίας. Όλα φαίνονται να έχουν την ίδια δυσκολία. Δεν μπορεί να γίνει αξιολόγηση επιπέδου.
- Επανάληψη και επικάλυψη. Διαφορετικές ερωτήσεις μπορεί να μετρήσουν την ίδια έννοια. Ελέγξτε το υπόλοιπο κάλυψης.
- Αόριστη έκφραση. Ερωτήσεις με διπλή σημασία παραπλανούν άδικα τους μαθητές.
Συμβουλή: Ο πιο αποτελεσματικός τρόπος για να επικυρώσετε ένα σύνολο ερωτήσεων είναι να γράψετε κώδικα που λύνει όλες τις ερωτήσεις ταυτόχρονα με το SymPy. Πείτε στο AI «γράψτε τον κώδικα που λύνει καθένα από αυτά τα 10 προβλήματα με το SymPy», εκτελέστε τον κώδικα και συγκρίνετε μαζικά τα αποτελέσματα του SymPy με το κλειδί απάντησης του AI. Με αυτόν τον τρόπο, ελέγχετε τις 10 ερωτήσεις όχι μία προς μία, αλλά συλλογικά και ντετερμινιστικά.
Συνοπτικά
Η τεχνητή νοημοσύνη επιταχύνει δραματικά τη δημιουργία μαθηματικών ερωτήσεων και εξετάσεων: παραλλαγή ερωτήσεων, σχεδιασμός περισπασμού, κλειδί λύσης, βαθμολογία δυσκολίας. Ωστόσο, κάθε ερώτηση και κάθε κλειδί απάντησης πρέπει να επικυρώνονται ανεξάρτητα — κατά προτίμηση να επαληθεύονται μαζικά με το SymPy. Τα πιο συνηθισμένα σφάλματα είναι το λανθασμένο κλειδί απάντησης, οι πολλαπλές/μηδενικές σωστές επιλογές και οι αδύναμοι παράγοντες περισπασμού. Ο καθορισμός του θέματος, του επιπέδου και της κατανομής δυσκολίας από την αρχή αυξάνει την ποιότητα. Τυχόν μη επαληθευμένες ερωτήσεις δεν πρέπει να εισέλθουν στην εξέταση.
Εργασία εφαρμογής
Επιλέξτε ένα θέμα. Ζητήστε από το AI να παράγει 8-10 ερωτήσεις πολλαπλής επιλογής + λύσεις με συγκεκριμένη κατανομή δυσκολίας με το 1ο πρότυπο. Στη συνέχεια, θυμηθείτε από την ενότητα 4, ζητήστε από το AI να γράψει έναν κωδικό που λύνει όλες τις ερωτήσεις με το SymPy και να εκτελέσει τον κώδικα. Συγκρίνετε τα αποτελέσματα του SymPy με το κλειδί απάντησης του YZ. Βεβαιωθείτε ότι υπάρχει ακριβώς μία σωστή επιλογή σε κάθε ερώτηση και ότι οι παράγοντες που αποσπούν την προσοχή είναι πραγματικά λανθασμένοι. Βρείτε και διορθώστε τουλάχιστον ένα σφάλμα ή έναν αδύναμο αντιπερισπασμό.
λίστα ελέγχου
- [ ] Έχω δηλώσει ξεκάθαρα το θέμα, το επίπεδο και την κατανομή δυσκολίας.
- [ ] Έλυσα κάθε ερώτηση ανεξάρτητα (κατά προτίμηση παρτίδα με το SymPy).
- [ ] Σύγκρισα το κλειδί απάντησης με τα αποτελέσματα του SymPy.
- [ ] Επιβεβαίωσα ότι υπάρχει ακριβώς μία σωστή επιλογή σε κάθε ερώτηση.
- [ ] Έλεγξα ότι οι αποσπάσεις της προσοχής βασίστηκαν σε τυπικά λάθη και ήταν στην πραγματικότητα λάθος.
- [ ] Φρόντισα να μην υπάρχουν ασαφείς δηλώσεις και επαναλαμβανόμενες ερωτήσεις.