Чтобы создать оценочную рубрику с помощью ИИ, начните с утверждённых целей задания и наблюдаемых доказательств. Выберите аналитическую или целостную структуру, разделите независимые критерии, опишите уровни через доказательства и испытайте рубрику на обезличенных или синтетических примерах. Преподаватели калибруют оценивание, разрешают разногласия, определяют итоговую оценку и обеспечивают путь пересмотра или апелляции. То же относится к стандартизированной оценке видео и записанных выступлений: ИИ поможет составить наблюдаемые критерии, но согласованные оценки дают откалиброванная рубрика и проверка преподавателем, а не сама модель.

Это руководство о проектировании оценки и согласованности, а не о создании тестов с ИИ и не об автоматическом выставлении отметок. Общее руководство по ИИ задаёт более широкую модель безопасности; здесь ИИ — помощник в составлении измерительного инструмента, за который отвечает преподаватель.

Ключевые выводы

Свяжите каждый критерий с утверждённой учебной целью.

Оценивайте наблюдаемое доказательство, а не личность, догадки об усилиях или внешний лоск, не связанный с заданием.

Выбирайте аналитическую или целостную структуру осознанно.

Описывайте значимые различия между уровнями, а не заменяйте их словами «отлично» и «хорошо».

Проверьте веса, двойной счёт и лишние барьеры.

Проведите калибровку до значимого оценивания.

Итог, обратная связь и апелляция остаются у людей.

Зафиксируйте задание и цели

Неясное задание нельзя исправить рубрикой. Сохраните точный текст задания, утверждённые учебные цели, требуемый результат, разрешённые ресурсы, ограничения, способ сдачи и действующую политику оценивания. Если задание меняется, создавайте новую версию и рубрики.

Заполните заголовок согласования:

Поле	Запись
Задание	Версия и дата
Цели	Проверенные номера и формулировки
Доказательство	Что учащийся должен показать
Ограничения	Длина, инструменты, совместная работа, источники, формат
Исключения	Что не должно влиять на балл
Владелец	Преподаватель или руководитель оценивания

Руководство Carnegie Mellon объясняет, что рубрики выражают ожидания, описывают уровни качества и поддерживают согласованную оценку и обратную связь.［1］ Поэтому первая задача — согласование с целями, а не красивые дескрипторы.

Что считать наблюдаемым доказательством?

Для каждой цели спросите, что проверяющий действительно может увидеть или услышать в работе. Доказательством может быть точное объяснение, обоснованный метод, работающая процедура, уместное использование источников, защитимая интерпретация или продемонстрированный навык.

Избегайте косвенных признаков, если они не входят в цель. Число страниц не доказывает глубину. Сложная лексика не доказывает рассуждение. Визуальный лоск не доказывает фактическую точность. Уверенность во время выступления не обязательно доказывает знание предмета.

Сформулируйте доказательства до критериев:

Цель	Наблюдаемое доказательство	Само по себе недостаточно
Поддержать тезис	Источник связан с тезисом объяснением	Число ссылок
Применить метод	Шаги уместны, видимы и проверены	Только верный ответ
Передать результат	Структура раскрывает ход мысли аудитории	Декоративное оформление

ИИ может предложить недостающие типы доказательств, но соответствие утверждает преподаватель.

Какую структуру выбрать: аналитическую или целостную?

Аналитическая рубрика оценивает критерии отдельно и даёт адресную обратную связь. Она полезна, когда учащимся и проверяющим нужно видеть отдельные сильные и слабые стороны или связь с целями. Её дольше составлять и применять, а плохо разделённые критерии могут дважды учитывать одно и то же доказательство.

Целостная рубрика присваивает один общий уровень по интегральному описанию. Она подходит для быстрых суждений или работ, качества которых тесно связаны, но даёт меньше диагностических деталей и может скрывать расхождения между проверяющими.

Не выбирайте аналитическую только потому, что таблица выглядит строго, и целостную — только потому, что она короче. Запишите решение, предполагаемое применение, число проверяющих, потребность в обратной связи и последствия.

Как сделать критерии независимыми?

Составьте короткий список критериев, каждый из которых представляет одно значимое измерение. Проверьте каждую пару: может ли работа быть сильной по одному и слабой по другому? Если нет, они, вероятно, пересекаются.

Типичные проблемы: отдельная оценка «анализа», «критического мышления» и «качества рассуждения» без различий между ними; учёт грамотности внутри каждого критерия; баллы за оформление, дублирующие коммуникацию.

Для каждого критерия заполните:

Поле	Вопрос
Критерий	Какое измерение оценивается?
Связь с целью	Какую утверждённую цель он измеряет?
Доказательство	Какие наблюдаемые признаки подтверждают оценку?
Исключения	Какие несущественные признаки не должны влиять?
Вес	Почему это измерение имеет такие последствия?

Уберите критерии, которые нельзя связать с заданием или политикой.

Опишите уровни через доказательства

Метки «отлично», «хорошо», «удовлетворительно» и «слабо» не сообщают проверяющему, что наблюдать. Описывайте, как меняется доказательство от уровня к уровню. Используйте различия в точности, полноте, уместности, рассуждении, самостоятельности, переносе или последовательности, только если они соответствуют цели.

Пример:

Критерий: использование доказательств	Уровень 4	Уровень 3	Уровень 2	Уровень 1
Дескриптор	Выбирает релевантные доказательства, объясняет их связь с каждым главным тезисом и рассматривает существенное ограничение	Выбирает релевантные доказательства и связывает их с главными тезисами; одна связь или ограничение раскрыты неполно	Приводит часть релевантных доказательств, но связь с тезисами заявлена без объяснения или непоследовательна	Приводит мало релевантных доказательств или не связывает их с тезисами

Не превращайте подсчёт мелких ошибок в автоматический уровень, если число не связано с обучением обоснованно. Избегайте дескрипторов, которые лишь добавляют усилители: «очень ясно», «в основном ясно», «отчасти ясно».

Пишите соседние уровни так, чтобы проверяющий мог объяснить, почему доказательство ближе к одному, чем к другому. Попросите ИИ найти неопределённые прилагательные, составные дескрипторы, невыполнимые требования и пробелы между уровнями.

Как проверить веса и посторонние факторы?

Веса показывают приоритеты. Соотносите их с учебным временем и важностью цели, а не с тем, что легко посчитать. Убедитесь, что сочетание критериев не наказывает одну и ту же ошибку несколько раз.

Руководство Carnegie Mellon по инклюзивному оцениванию рекомендует прозрачные ожидания, согласование с целями, внимание к смещению и практики оценивания, поддерживающие обучение.［2］ Проверьте, не влияют ли на балл беглость речи, почерк, скорость, оформление, акцент, доступ к технике или культурный опыт, если они не входят в цель.

Называйте исключённые признаки явно. Если грамотность важна только для цели, связанной с письмом, не позволяйте ей снижать баллы за содержание в других критериях. Если своевременность сдачи регулируется отдельной политикой, не прячьте её в каждом дескрипторе.

CAST UDL 3.0 поощряет множественные способы вовлечения, представления, действия и выражения.［3］ Если способ ответа сам по себе не является целью, допускайте равноценные альтернативы, дающие эквивалентные доказательства. Формальные меры поддержки остаются в ведении установленных образовательных процессов, а не ИИ.

Постройте таблицу рубрики

Используйте полную рабочую таблицу, а не только дескрипторы для учащихся:

Критерий	Цель	Доказательство	Уровень 4	Уровень 3	Уровень 2	Уровень 1	Вес	Исключить	Калибровка
Доказательства и рассуждение	OBJ-2	Тезисы связаны с релевантными источниками	Конкретный дескриптор	Конкретный дескриптор	Конкретный дескриптор	Конкретный дескриптор	35%	Одно лишь число ссылок; стиль прозы	ID образцов и заметки

Если внутренние заметки калибровки раскрывают защищённые сведения об учащихся или ответы, храните их отдельно. Опубликованная рубрика всё равно должна быть достаточно ясной, чтобы учащиеся понимали ожидания до сдачи.

Как создать оценочную рубрику с помощью ИИ по ограниченному заданию

Создай черновик рубрики только из задания, целей и карты доказательств.
Для каждого критерия верни цель, наблюдаемое доказательство,
четыре различимых уровня, вес с обоснованием и лишние признаки.
Отметь пересечения, расплывчатые прилагательные, составные дескрипторы и пропущенные уровни.
Неподтверждённые допущения пометь ПРОВЕРИТЬ.
Не добавляй цели, не оценивай работы и не определяй итог или меры поддержки.

Сверяйте каждый сгенерированный дескриптор с реальным заданием. ИИ может придумать требования, переоценить внешний лоск или выдать симметричные формулировки, которые не отражают значимых различий в обучении.

Зачем калибровать рубрику на примерах?

До значимого оценивания примените черновую рубрику к намеренно разнообразному набору разрешённых обезличенных прошлых работ, официальных образцов или синтетических примеров. Не загружайте идентифицируемые работы в неутверждённую модель. Проверяющие сначала оценивают независимо и только потом обсуждают.

Записывайте калибровку:

Образец	Критерий	A	B	Доказательство	Причина	Решение
S-03	Источники	3	2	Абзацы 2 и 4	Разное понимание «объясняет связь»	Добавить пограничный пример и повторить

Ищите повторяющиеся расхождения, неприменимые критерии, соседние уровни, которые сливаются, и примеры, где оценку определяют посторонние признаки. Исправьте рубрику и повторите калибровку. Не усредняйте расхождения механически — выясните их причину.

Определите правила подсчёта и разногласий

Определите, оценивается ли работа по каждому критерию отдельно, можно ли на границах уровней применять профессиональное суждение, как округляются итоги, как поступать при отсутствии доказательств и когда нужен второй проверяющий. Задокументируйте, кто разрешает разногласия и применяется ли повторная оценка ко всем сопоставимым работам.

ИИ может резюмировать обезличенные заметки калибровки, но не должен решать, какой проверяющий прав, или ставить итоговую оценку. Оценка модели — не независимый проверяющий-человек.

Опубликуйте ожидания и сохраните проверку

По возможности выдавайте учащимся задание и рубрику до сдачи. Объясните критерии, веса, примеры, разрешённые инструменты, правила указания авторства и порядок вопросов. Если учащимся можно использовать ИИ, определите допустимую помощь и проверку; см. статью об ответственном использовании ИИ для заданий.

При оценивании ссылайтесь в отзывах на наблюдаемые доказательства. Сохраняйте путь для разъяснения, пересмотра или апелляции в соответствии с политикой учреждения. Итоговое решение принимает преподаватель или уполномоченный орган, документируя любое исключение из рубрики.

Руководство UNESCO по генеративному ИИ в образовании подчёркивает человеческую субъектность, этичное использование, приватность и проверку.［4］ Автоматическое итоговое оценивание без содержательной проверки преподавателем противоречит этому процессу.

Наблюдайте за рубрикой после применения

После цикла оценивания изучите распределение по критериям, пропущенные доказательства, частые вопросы, расхождения проверяющих, темы апелляций, барьеры доступности и то, поощряла ли рубрика нужное обучение. Закономерности — повод для разбора, а не доказательство того, что группа учащихся или критерий плохи.

Изменения оформляйте новыми версиями. Не меняйте дескрипторы молча, пока работы ещё оцениваются. Если недостаток требует немедленного исправления, задокументируйте решение и применяйте его ко всем затронутым работам одинаково.

Итоговый список проверки

Задание и цели проверены и зафиксированы.
Каждый критерий связан с целью и доказательством.
Критерии независимы и не считают одно дважды.
Уровни имеют наблюдаемые соседние различия.
Веса отражают учебные приоритеты и имеют обоснование.
Посторонние признаки и барьеры доступа явно исключены.
Калибровка использовала разрешённые обезличенные или синтетические примеры.
Разногласия документированы.
Учащиеся получили рубрику и путь пересмотра заранее.
ИИ не получил узнаваемые работы и не определял итог.
Факты и политика проверены по источникам.

Часто задаваемые вопросы (FAQ)

Что такое рубрика в оценивании с помощью ИИ?

Рубрика — это инструмент оценивания, который явно описывает ожидания к работе через критерии и уровни выполнения.［1］ При оценивании с помощью ИИ рубрика становится письменным стандартом, который модель могут попросить применить; размытые критерии дают столь же размытый результат. В этом процессе ИИ лишь помогает составить рубрику, а применяет её преподаватель.

Может ли ИИ автоматически оценивать по рубрике?

Не в этом процессе. ИИ может помочь составить рубрику, но преподаватель изучает доказательства, применяет суждение, даёт обратную связь и определяет итоговую оценку.

Может ли ИИ оценивать видеоработы по стандартизированной рубрике?

Видео и записанным выступлениям тоже нужны критерии, привязанные к наблюдаемым доказательствам, например к показанному шагу или объяснённому выбору. Рубрики помогают сохранять согласованность оценок во времени и между проверяющими.［1］ Эта согласованность всё равно зависит от откалиброванных проверяющих-людей. Не загружайте идентифицируемые записи учащихся в неутверждённые сервисы; итоговую оценку ставит преподаватель.

Чем аналитическая рубрика отличается от целостной?

Аналитическая оценивает каждый критерий отдельно, а целостная присваивает один интегральный уровень. Выбирайте по доказательствам, потребности в обратной связи и условиям оценивания.

Сколько критериев нужно?

Минимальное число независимых критериев, достаточное для утверждённых целей. Лишние критерии дробят суждение и заставляют дважды учитывать одно и то же доказательство.

Достаточно ли слов «отлично» и «хорошо»?

Нет. Каждому уровню нужны наблюдаемые дескрипторы, которые объясняют, какое доказательство отличает его от соседних уровней.

Всегда ли оценивать грамматику?

Только если языковая правильность входит в учебную цель или заявленное требование задания. Иначе она может стать посторонним барьером.

Можно ли загружать работы учащихся?

Только разрешённые обезличенные образцы или синтетические примеры и только в утверждённой среде. Идентифицируемые работы в общий ИИ-сервис не загружайте.

Что делать при разногласии проверяющих?

Им следует сослаться на доказательства, найти неясный дескриптор, разрешить расхождение по установленной процедуре, при необходимости исправить рубрику и повторить калибровку.

Когда показать рубрику?

По возможности до сдачи работы, объяснив критерии, веса, примеры, правила использования инструментов и процесс пересмотра.

Источники

Carnegie Mellon University, “Creating and Using Rubrics” — https://www.cmu.edu/teaching/assessment/assesslearning/rubrics.html
Carnegie Mellon University, “Inclusive Grading and Feedback” — https://www.cmu.edu/teaching/designteach/inclusiveexcellence/gradingandfeedback/index.html
CAST, “UDL Guidelines 3.0” — https://udlguidelines.cast.org/
UNESCO, “Guidance for Generative AI in Education and Research” — https://www.unesco.org/en/articles/guidance-generative-ai-education-and-research

Sources checked 4 октября 2026 г.

Как создать оценочную рубрику с помощью ИИ