Прибыль:
- Способность понимать аналитические и целостные типы рубрик, критерии и концепции уровня успеха, а также разрабатывать прозрачные рубрики при поддержке искусственного интеллекта.
- Способность создавать показатели, соответствующие достижениям, и веса баллов для оценки производительности задач, портфолио и проектов.
- Способность понимать, что решение о выставлении оценок и итоговой оценке принадлежит учителю, что искусственный интеллект не может выставлять оценки в одиночку и что последовательность должна проверяться учителем.
Легко сказать студенту: «Этот проект получил 70 баллов»; но студент спрашивает "почему 70?" или родительские возражения, у вас должна быть справедливая и защитимая основа. Этой основой является рубрика: инструмент оценки, который заранее показывает, по каким критериям и на каких уровнях будет оцениваться выступление (проект, композиция, презентация, портфолио). Хорошая рубрика не только сообщает ученику, «чего от вас ожидают», но и делает выставление оценок учителем последовательным и прозрачным. ИИ быстро составляет показатели, связанные с достижениями, и определения уровней; Вы определяете выравнивание, справедливость и вес. Граница ясна: выставление оценок и итоговая оценка — это решение, которое влияет на учащегося; Ответственность и окончательное утверждение принадлежат учителю. ИИ не может забивать в одиночку.
Типы и компоненты рубрик
Есть два основных типа. Аналитическая рубрика разбивает результативность на отдельные критерии — например, «содержание», «организация», «язык и выражение», «письмо» в эссе — и оценивает каждый критерий на отдельных уровнях достижений (например, 4 = очень хорошо, 3 = хорошо, 2 = улучшается, 1 = начало). Предоставляет подробную обратную связь, но требует времени для подготовки и оценки. Целостная рубрика придает единый общий уровень всему исследованию; Он быстрый, но не показывает, где он отстает.
Компонентами аналитической рубрики являются: критерии (что мы оцениваем), уровни (насколько хорошо), определение уровня каждой ячейки (конкретный показатель этого уровня) и веса (какой процент оценки соответствует какому критерию). Определение хорошего уровня заметно: не «хорошо написано», а «не более 2-х опечаток и абзацев в логическом порядке».
Совет: поделитесь рубрикой с учеником ПЕРЕД выполнением задания. Рубрика — это не инструмент для заметок-сюрпризов, а карта обучения; Если студент знает, над чем работать, он производит лучший продукт.
Последовательность и справедливость
Настоящая ценность рубрики — последовательность: когда два учителя получают одну и ту же работу в разное время, результат должен быть одинаковым. Это называется надежностью оценщика. ИИ может составить схему рубрики, но учитель обеспечивает последовательность: работа учителя — сделать описания уровней достаточно конкретными, «калибровать» несколько тематических исследований с помощью рубрики (оценка проб) и разъяснить правило в крайних случаях.
В интересах справедливости критерий не должен оценивать вещи, не имеющие отношения к результату (красота почерка, материал, к которому учащийся нуждается в социально-экономическом доступе). ИИ иногда добавляет критерии недостижения, такие как «эстетика представления»; Необходимо в них разобраться.
Шаг за шагом: дизайн рубрики с помощью ИИ
- Дайте задачу и достижение. То, что будет измеряться рубрикой, зависит от того, какой результат.
- Выберите жанр. Если вам нужна подробная обратная связь, аналитическая; если вы хотите быстрого общего суждения, целостного.
- Спрашивайте критерии, но фильтруйте их. 3-5 критериев достижения; удалите ненужные.
- Определения конкретных уровней. Попросите наблюдаемые показатели.
- Худеть. Какой критерий важнее? Пусть сумма будет 100.
- Калибровка. Оцените 1–2 выборочных исследования с помощью рубрик и последовательности тестов.
- Примите окончательное решение. Даже если ИИ предлагает примерную оценку, итоговую оценку ставит учитель.
три мини-кейса
Случай 1. Извлечение критерия недостижения. Турецкий преподаватель попросил у AI аналитическую рубрику для эссе. ИИ предложил 5 критериев, но одним из них была «красота почерка» — критерий, который не имел никакого отношения к результату и несправедливо наказывал учащегося с неразвитым почерком. Учитель убрал его и заменил на «развитие идеи». Рубрика была одновременно справедливой и ориентированной на достижения.
Случай 2 — Конкретизация. В первой рубрике одного учителя уровни были абстрактными, например «очень хорошо/хорошо/удовлетворительно»; Два студента выполнили одинаковую работу на разных уровнях. Он посоветовал ИИ «переписать каждый уровень с помощью наблюдаемого индикатора». Когда появились конкретные определения, такие как «Хорошо = минимум 3 примера и четкий абзац заключения», последовательность возросла, а возражения уменьшились.
Случай 3 — Калибровка. При оценке проекта учитель сначала оценивал 3 образца проектов по критериям, созданным ИИ. ИИ кому-то предложил 85; Преподаватель нашел тому же проекту рубрику 72, потому что ИИ слишком щедро интерпретировал один критерий. Преподаватель уточнял описание уровня и сам выставлял итоговые оценки. ИИ ускорил проект; Учитель принял решение.
Копируемые шаблоны
1) Аналитическая схема рубрики:
Ваша роль: учитель [предмета]. Задача: «[написать задание на выполнение]», достижение: «[достижение]», [X. сорт]. Создайте аналитическую рубрику с 4 критериями. Пусть каждый критерий связан с результатом (добавьте необъективные критерии, такие как почерк и эстетика). Напишите 4 уровня успеха и НАБЛЮДАТЕЛЬНЫЙ индикатор для каждого уровня. Взвесьте критерии так, чтобы общая сумма составила 100.
2) Конкретизация определений уровней:
Описания уровней следующей рубрики очень абстрактны («хорошо», «удовлетворительно»). Перепишите каждый уровень, используя наблюдаемые, исчисляемые показатели (например, «не более 2 ошибок», «минимум 3 примера»). Рубрика: [вставить]
3) Целостная рубрика (быстрая оценка):
Напишите четырехуровневую целостную рубрику для «[задачи]». Пусть каждый уровень наглядно описывает общий характер работы в одном абзаце. Усиление: «[усиление]». Также укажите диапазоны нот.
4) Проверка калибровки:
Ниже представлены рубрики и студенческие работы. Согласно рубрике, укажите свой уровень по каждому показателю, с обоснованием. Дайте это как ПРЕДЛОЖЕНИЕ; Я поставлю итоговую оценку. Отметьте все критерии, которые остались неясными. Рубрика + исследование: [вставить]
Слабая подсказка / Сильная подсказка
Слабая подсказка:
Напишите рубрику для проекта.
Нет задачи, достижения, типа, количества критериев, веса; Появляется недостижение и абстрактная рубрика.
Мощная подсказка:
Ваша роль: учитель естественных наук. Задание: «Студент исследует возобновляемый источник энергии и готовит плакат». Цель: «Студент объясняет принцип работы и преимущества источника энергии». 7 класс. Аналитическая рубрика с 4 критериями: точность содержания, ясность объяснения, использование источников, порядок. Добавление критериев недостижения. Пусть каждый уровень является наблюдаемым; Сумма весов равна 100.
особенность
Аналитическая рубрика
целостная рубрика
Количество критериев
Множественные, оцениваются отдельно
Единое общее решение
Обратная связь
Подробное, основанное на критериях
Общий
скорость
медленный
быстро
наиболее подходящий
Развитие процессов/навыков
Краткий обзор
Вклад ИИ
Критерии + схема уровня
Черновой вариант абзаца уровня
Распространенные ошибки
- Мера недостижения. Оценка вещей, не связанных с результатом, таких как почерк, эстетика и доступ к материалам, противоречит справедливости.
- Определение абстрактного уровня. Такие определения, как «хорошо/справедливо», приводят к противоречиям и возражениям; Используйте наблюдаемый индикатор.
- Рубрику покажу позже. Неделение перед выполнением задания лишает ученика цели.
- Делаем оценку ИИ. ИИ может предложить примерные оценки, но окончательную оценку выставляет учитель; Контроль за правильностью осуществляется преподавателем.
- Пропуск калибровки. Использование рубрики без проверки на конкретных примерах дает удивительные результаты.
Внимание: заманчиво, но рискованно дать ИИ студенческую работу и сказать «оцените ее». Студенческие работы могут содержать личные данные (анонимизировать), а оценка ИИ может быть противоречивой/предвзятой. Используйте искусственный интеллект, чтобы ПРЕДЛОЖИТЬ замечания и составить отзыв; Вы решаете.
В итоге
Рубрика – это инструмент, который делает оценку прозрачной, последовательной и оправданной. Аналитическая рубрика обеспечивает подробную обратную связь на основе критериев, а целостная рубрика обеспечивает быстрое общее суждение. ИИ быстро составляет показатели, связанные с достижениями, конкретные определения уровней и веса; Но ответственность учителя состоит в том, чтобы разобраться в критериях недостижения, сделать уровни наблюдаемыми, откалибровать их и выставить окончательную оценку. Оценка – это решение, которое влияет на учащегося; Это не делегировано ИИ.
Задача приложения
Создайте рубрику из 4 критериев с помощью шаблона «Аналитическая схема рубрики» для задачи по производительности, которую вы вскоре дадите. Удалите все критерии недостижения и сделайте определения уровней наблюдаемыми. Затем проверьте согласованность, оценив 2 ваших (или гипотетических) выборочных исследования по этому критерию; Оцените, отражают ли оценки двух исследований их истинные качества, и внесите коррективы в свою рубрику.
контрольный список
- [ ] Все ли критерии связаны с достижением (нет критериев недостижения)?
- [ ] Являются ли определения уровней наблюдаемыми и конкретными?
- [ ] Я определил веса и их сумма равна 100?
- [ ] Могу ли я поделиться рубрикой с учеником перед выполнением задания?
- [ ] Сверил ли я рубрику с образцом работы и поставил ли я окончательную оценку самостоятельно?