Критерии оценивания и рубрики: как написать
Критерии существуют не для того, чтобы «узаконить» оценку, а чтобы студент понимал, что от него ждут, а преподаватель мог объяснить решение. Если два преподавателя ставят за одну работу разные оценки, проблема чаще в критериях, чем в студентах.
Разберём, как написать критерии и рубрику, которую можно применить на практике.
Что такое критерий
Критерий — признак, по которому оценивается работа. «Аргументация», «структура», «работа с источниками» — примеры критериев.
Критерий не равен требованию к содержанию: он задаёт измерение, по которому работу можно сравнить с другими.
Критерий и дескриптор
Дескриптор описывает, как выглядит работа на определённом уровне. Именно дескрипторы делают критерий применимым.
Без дескрипторов критерий превращается в оценочное суждение: «хорошо» и «слабо» каждый понимает по-своему.
Уровни
Обычно достаточно трёх-четырёх уровней. Слишком мелкая шкала создаёт видимость точности, но не повышает согласованность оценок.
Названия уровней лучше делать содержательными, а не только цифровыми.
Количество критериев
Четыре-семь критериев — рабочий диапазон для одной работы. Больше — и преподаватель перестаёт удерживать их в голове, а студент не понимает приоритетов.
Если критериев много, объедините близкие или вынесите часть в отдельное задание.
Вес
Веса задают приоритет. Если аргументация важнее оформления, вес должен это отражать.
Проверьте, что сумма весов равна 100 и что ни один критерий не получает вес случайно, просто потому что о нём вспомнили.
Формулировки
Дескриптор должен описывать наблюдаемое. «Глубокое понимание» не наблюдаемо; «объясняет причину и приводит пример» — наблюдаемо.
Избегайте слов, которые нельзя проверить: «оригинальный», «интересный», «творческий» без пояснения.
Оценивание письменной работы
Для эссе обычно важны: тезис, аргументация, работа с источниками, структура, язык.
Каждый пункт получает дескриптор. Например, для тезиса: сформулирован и спорен; сформулирован, но описателен; отсутствует.
Устное выступление
Критерии: содержание, структура, ответы на вопросы, работа с материалом.
Отдельно стоит оценивать соблюдение времени: это часть навыка, а не формальность.
Проект
В проекте оценивают не только результат, но и процесс: планирование, распределение работы, рефлексию.
Если процесс не оценивается, студенты делают его в последнюю ночь — и это логично.
Групповая работа
Оценивать индивидуальный вклад сложно, но необходимо. Используйте самооценку и оценку вклада участниками, а также защиту проекта.
Не ставьте всей группе оценку за работу одного человека.
Проверка рубрики
Дайте рубрику коллеге и попросите оценить две работы. Если оценки расходятся сильно, дескрипторы нужно уточнить.
Проверка на двух-трёх примерах занимает час и экономит время на апелляциях.
Студентам заранее
Рубрика должна быть доступна до сдачи работы. Иначе критерии превращаются в объяснение уже выставленной оценки.
Обсудите рубрику на занятии: студенты часто не понимают разницу между уровнями, пока не увидят примеры.
Обратная связь
Критерий задаёт структуру комментария. Вместо общего «доработайте» студент видит, какой именно аспект слаб.
Комментарий должен указывать, что делать дальше, а не только констатировать недостаток.
Чего избегать
Критериев, которых нет в задании.
Скрытых требований.
Оценки за посещаемость, не связанной с результатом.
Рубрик, которые никогда не пересматриваются.
Аналитические и целостные рубрики
Аналитическая рубрика оценивает каждый критерий отдельно, целостная — работу в целом по одному описанию. Аналитическая даёт более подробную обратную связь, но требует больше времени при проверке. Выбор зависит от размера группы и целей задания.
Пример дескриптора
Для критерия «работа с источниками» уровни могут выглядеть так: использует источники по теме и подтверждает ими тезис; использует источники, но без связи с аргументом; ссылается формально, без опоры на содержание. Такие формулировки можно применить к конкретной работе без догадок.
Согласованность проверяющих
Если работу проверяют несколько человек, проведите калибровку: оцените вместе две-три работы и сравните результаты. Расхождения показывают, какие дескрипторы нужно уточнить. Без этой процедуры студенты получают разные оценки за одинаковые работы.
Апелляции
Рубрика упрощает разбор спорных случаев: обсуждается не оценка целиком, а конкретный критерий. Это снижает эмоциональность разговора и делает его короче. Держите работы и комментарии до окончания периода апелляций.
Обновление
Рубрику стоит пересматривать после каждого семестра. Задания меняются, а критерии остаются прежними, и постепенно перестают соответствовать работе. Отметьте, какие дескрипторы вызывали больше всего вопросов.
Простые задания
Для коротких заданий подробная рубрика избыточна. Достаточно трёх критериев с двумя уровнями. Излишняя детализация не повышает точность, но увеличивает время проверки.
Работа со студентами
Разберите одну работу по рубрике вместе с группой. Студенты часто не понимают разницу между уровнями, пока не увидят пример. Используйте анонимный или учебный текст, а не работу из группы.
Хранение рубрик
Держите рубрики в одном месте вместе с заданиями. Через год бывает трудно вспомнить, по каким критериям проверялась работа, а это важно при апелляции.
Язык рубрики
Пишите дескрипторы языком, понятным студентам. Сложные формулировки создают видимость точности, но не помогают понять требование.
Чек-лист
- Критерии выписаны.
- Дескрипторы наблюдаемы.
- Уровни описаны.
- Веса заданы.
- Рубрика проверена коллегой.
- Студенты ознакомлены заранее.
Частые вопросы
Сколько уровней оптимально?
Три-четыре.
Нужно ли публиковать рубрику?
Да, до сдачи работы.
Можно ли менять критерии в семестре?
Только если изменения объявлены заранее.