Прибуток:
- Здатність розуміти аналітичні та цілісні типи рубрик, критерії та концепції рівня успіху та створювати прозорі рубрики за допомогою штучного інтелекту.
- Здатність створювати метрики, узгоджені з досягненнями, і вагові коефіцієнти для оцінки виконання завдань, портфоліо та проектів.
- Здатність розуміти, що рішення виставляти оцінки та остаточне оцінювання належить вчителю, що штучний інтелект не може самостійно виставляти бали, і що послідовність має перевіряти вчитель.
Студенту легко сказати «цей проект отримав 70»; але студент запитує "чому 70?" або заперечує батьків, ви повинні мати справедливу та обґрунтовану основу. Цією основою є рубрика: інструмент підрахунку балів, який заздалегідь показує, за якими критеріями та на яких рівнях буде оцінюватися виступ (проект, композиція, презентація, портфоліо). Хороша оцінка говорить учневі, «що від вас очікують», і робить виставлення балів учителем послідовним і прозорим. AI швидко створює метрики, пов’язані з досягненнями, і визначення рівнів; Ви визначаєте вирівнювання, справедливість і ваги. Межа чітка: оцінювання та остаточне оцінювання є рішенням, яке впливає на студента; Відповідальність і остаточне затвердження належить викладачеві. ШІ не може забити один.
Типи та складові рубрик
Існує два основних типи. Аналітична рубрика розбиває продуктивність на окремі критерії — наприклад, «зміст», «організація», «мова та вираження», «письмо» в есе — та оцінює кожен критерій на окремих рівнях досягнення (наприклад, 4=дуже добре, 3=добре, 2=покращується, 1=початок). Надає детальний відгук, але потрібен час, щоб підготуватися та отримати оцінку. Цілісна рубрика дає єдиний загальний рівень всьому дослідженню; Він швидкий, але не показує, де йому не вистачає.
Компонентами аналітичної рубрики є: критерії (що ми оцінюємо), рівні (наскільки добре), визначення рівня кожної комірки (конкретний показник цього рівня) і ваги (який відсоток оцінки становить який критерій). Визначення хорошого рівня можна спостерігати: не «добре написано», а «не більше 2 друкарських помилок і абзаців у логічному порядку».
Порада: поділіться рубрикою зі студентом ПЕРЕД виконанням завдання. Рубрика — це не інструмент для несподіваних нотаток, а навчальна карта; Якщо учень знає, над чим працювати, він виробляє кращий продукт.
Послідовність і справедливість
Справжньою цінністю рубрики є послідовність: коли два вчителі оцінюють ту саму роботу в два різні періоди часу, результат має бути однаковим. Це називається надійністю оцінювача. ШІ може створити структуру рубрики, але вчитель забезпечує узгодженість: робота вчителя полягає в тому, щоб зробити описи рівнів достатньо конкретними, «відкалібрувати» кілька тематичних досліджень за рубрикою (пробна оцінка) і уточнити правило в маргінальних випадках.
В інтересах справедливості рубрика не повинна оцінювати те, що не має значення для результату (краса почерку, матеріал, до якого учень потребує соціально-економічного доступу). ШІ іноді додає критерії недосягнення, такі як «естетика презентації»; Треба їх розібрати.
Крок за кроком: дизайн рубрик за допомогою ШІ
- Дайте завдання та досягнення. Від результату залежить те, що вимірюватиме рубрика.
- Виберіть жанр. Якщо вам потрібен детальний відгук, аналітика; якщо ви хочете отримати швидке загальне судження, цілісне.
- Запитуйте критерії, але фільтруйте їх. 3-5 критеріїв щодо досягнень; видаліть неактуальні.
- Визначення конкретного рівня. Попросіть спостережувані показники.
- Схуднути. Який критерій важливіший? Нехай загальна сума буде 100.
- Відкалібрувати. Оцініть 1-2 зразки дослідження з рубриками та узгодженістю тесту.
- Прийміть остаточне рішення. Навіть якщо штучний інтелект пропонує зразок оцінки, учитель виставляє остаточну оцінку.
три міні-чохла
Випадок 1 — Вилучення критерію недосягнення. Турецький вчитель попросив ШІ аналітичну рубрику для есе. AI запропонував 5 критеріїв, але одним з них була «краса почерку» — критерій, який не мав значення для результату та несправедливо карав учня з недостатньо розвиненим почерком. Учитель вийняв і замінив на «розвиток ідеї». Рубрика була одночасно справедливою та орієнтованою на досягнення.
Кейс 2 — Конкретизація. У першій рубриці одного вчителя рівні були абстрактними, наприклад «дуже добре/добре/задовільно»; Двоє студентів виконували різні рівні роботи. Він сказав ШІ «переписати кожен рівень за допомогою спостережуваного індикатора». Коли з’явилися конкретні визначення на кшталт «Добре = принаймні 3 приклади та чіткий абзац висновків», узгодженість підвищилася, а заперечень зменшилося.
Випадок 3 — Калібрування. Під час оцінювання проекту вчитель спочатку оцінив 3 зразки проектів із рубрикою, розробленою ШІ. ШІ запропонував комусь 85; Учитель знайшов той самий проект рубрикою 72, оскільки штучний інтелект надто щедро інтерпретував один критерій. Вчитель уточнював опис рівня та сам виставляв підсумкові оцінки. AI прискорив проект; Учитель прийняв рішення.
Шаблони, які можна копіювати
1) Опис аналітичної рубрики:
Ваша роль: [предметник] викладач. Завдання: «[написати виконання завдання]», досягнення: «[досягнення]», [X. клас]. Створіть аналітичну рубрику за 4 критеріями. Нехай кожен критерій буде пов’язаний з результатом (ДОДАТИ необ’єктивні критерії, такі як почерк і естетичність). Напишіть 4 рівні успіху та СПОСТЕРЕЖЕНИЙ показник для кожного рівня. Зважте критерії, щоб загальна кількість була 100.
2) Конкретизація визначення рівня:
Описи рівнів наступної рубрики дуже абстрактні («добре», «чесно»). Перепишіть кожен рівень із спостережуваними, підрахованими показниками (наприклад, «не більше 2 помилок», «принаймні 3 приклади»). Рубрика: [вклеїти]
3) Холістична рубрика (швидка оцінка):
Напишіть 4-рівневу цілісну рубрику «[задача]». Нехай кожен рівень помітно описує загальний характер роботи в одному абзаці. Посилення: "[посилення]". Також вкажіть нотні діапазони.
4) Перевірка калібрування:
Нижче подано рубрику та учнівську роботу. Відповідно до рубрики вкажіть свій рівень у кожному такті з обґрунтуванням. Дайте це як ПРОПОЗИЦІЮ; Поставлю остаточну оцінку. Позначте будь-які критерії, які залишаються незрозумілими. Рубрика + дослідження: [вставити]
Слабка підказка / Сильна підказка
Слабка підказка:
Напишіть рубрику до проекту.
Без завдання, досягнення, типу, кількості критеріїв, ваги; З’являється рубрика недосягнення та абстрактна.
Потужна підказка:
Ваша роль: вчитель природознавства. Завдання: «Учень досліджує відновлюване джерело енергії та готує плакат». Мета: «Учень пояснює принцип роботи та переваги джерела енергії». 7 клас. Аналітична рубрика за 4 критеріями: точність змісту, ясність пояснення, використання джерел, порядок. Додавання критеріїв недосягнення. Нехай кожен рівень є спостережуваним; Сума ваг дорівнює 100.
функція
Аналітична рубрика
цілісна рубрика
Кількість критеріїв
Кілька, зараховується окремо
Єдине загальне судження
Зворотній зв'язок
Детальний, критеріальний
Загальний
швидкість
повільний
швидко
найбільш підходящий
Процес/розвиток навичок
Швидкий огляд
Внесок ШІ
Критерії + схема рівня
Чернетка абзацу рівня
Поширені помилки
- Міра недосягнення. Оцінювання речей, які не мають відношення до результату, таких як почерк, естетика та доступ до матеріалів, перемагає справедливість.
- Визначення абстрактного рівня. Такі визначення, як «добре/чесно», призводять до непослідовності та заперечень; Використовуйте спостережуваний індикатор.
- Показ рубрики пізніше. Нерозділ перед завданням позбавляє учня мети.
- Виготовлення оцінки AI. ШІ може запропонувати зразки балів, але вчитель виставляє остаточну оцінку; Контроль послідовності – за вчителем.
- Пропуск калібрування. Використання рубрики без перевірки прикладів дає дивовижні результати.
Застереження: спокусливо, але ризиковано дати ШІ студентську роботу і сказати «оцінка». Робота студента може містити особисті дані (анонімізація), а оцінка ШІ може бути непослідовною/упередженою. Використовуйте ШІ, щоб ПРОПОНУВАТИ бали та окреслювати відгуки; Ви вирішуєте.
Підсумовуючи
Рубрика — це інструмент, який робить оцінювання прозорим, послідовним і обґрунтованим. Аналітична рубрика забезпечує детальний відгук на основі критеріїв, цілісна рубрика забезпечує швидке загальне судження. AI швидко створює метрики, пов’язані з досягненнями, конкретні визначення рівнів і ваги; Але вчитель зобов’язаний відсортувати критерії недосягнення, зробити рівні доступними для спостереження, відкалібрувати їх і поставити остаточну оцінку. Оцінка – це рішення, яке впливає на учня; Він не делегований ШІ.
Аплікаційне завдання
Створіть рубрику за 4 критеріями за допомогою шаблону «Схема аналітичної рубрики» для завдання щодо продуктивності, яке ви незабаром видасте. Видаліть будь-які критерії недосягнення та зробіть визначення рівнів доступними для спостереження. Потім перевірте узгодженість, оцінивши свої (або гіпотетичні) 2 вибіркові дослідження за цим показником; Оцініть, чи бали двох досліджень відображають їхні справжні якості, і внесіть корективи у свою рубрику.
контрольний список
- [ ] Чи всі критерії пов’язані з досягненням (немає критеріїв, що не відповідають)?
- [ ] Чи є визначення рівня спостережуваними та конкретними?
- [ ] Я визначив ваги, і їх сума дорівнює 100?
- [ ] Чи поділюся я рубрикою зі студентом перед виконанням завдання?
- [ ] Чи відкалібрував я рубрику за зразком роботи та поставив остаточну оцінку самостійно?