Рубрики: различия между версиями

Материал из База знаний Центра ПУСК МФТИ
1>Marycooch
 
перевод
 
(не показаны 3 промежуточные версии 2 участников)
Строка 1: Строка 1:
{{Advanced grading methods}}
{{Advanced grading methods}}
==About rubrics==
==О рубриках==
'''Rubrics''' are an [[Advanced grading methods|advanced grading method]] used for criteria-based assessment. The rubric consists of a set of criteria plotted against levels of achievement. A numeric grade is assigned to each level. For each criterion, the assessor chooses the level they judge the work to have reached. The raw rubric score is calculated as a sum of all criteria grades. The final grade is calculated by comparing the actual score with the worst/best possible score that could be received.
'''Рубрики''' ― это [[Передовые (усовершенствованные) методы оценки|передовой метод оценки]], используемый для оценки на основе критериев. Рубрика состоит из набора критериев, сопоставленных с уровнями достижений. Каждому уровню присваивается числовая оценка. Для каждого критерия оценщик выбирает уровень, которого, по его мнению, достигла работа. Итоговая оценка по рубрике рассчитывается как сумма оценок по всем критериям. Итоговая оценка рассчитывается путем сравнения фактической оценки с наихудшей/наилучшей из возможных оценок, которые можно было получить.


==Enable a rubric in your assignment==
== Включите рубрики в задание ==
There are two ways.  
#В настройках вашего задания раскройте раздел «Оценка».
#В меню «Метод оценивания» выберите «Рубрики».
#Обратите внимание на настройку максимальной оценки ― какую бы числовую оценку вы ни присвоили уровням критериев, итоговая оценка за задание будет пересчитана как доля от этой максимальной оценки.
#Сохраните настройки; для этого конкретного задания теперь включены рубрики.


The first is at the point of setting up the Assignment.
==Опишите рубрики==
#In your assignment's Settings, expand the '''Grade''' section.
[[Файл:Рубрики.png|альт=Рубрики (пример)|мини|Рубрики (пример)]]
#From the '''Grading method''' menu, choose Rubric.
Для создания новой рубрики:
#Note the '''Maximum grade''' setting - whatever numeric grade you assign to your criteria levels, the ultimate grade for the assignment will be recalculated as the proportion of that maximum grade.
#Перейдите в редактор рубрик по ссылке '''Передовое оценивание''' в блоке настроек задания.
#Save the settings; Rubric is now enabled for that particular Assignment.
#Нажмите кнопку Создать новую рубрику с нуля.
#Введите краткое отличительное название и (при необходимости) описание.  
#Нажмите, чтобы отредактировать критерий и уровень, а также ввести описание и присвоить баллы каждому уровню (см. скриншот справа).  
#При необходимости добавьте дополнительные критерии и уровни. Обратите внимание, что количество уровней для разных критериев может быть различным и что баллы могут иметь отрицательное значение — например, вычитаться из оценки при опоздании сдачи задания (см. примечания ниже).
#Задайте параметры раздела.  
#Наконец, сохраните определение рубрики, нажав «Сохранить» или «Сохранить как черновик». Эти действия соответственно устанавливают статус определения формы, как описано на странице [[Передовые (усовершенствованные) методы оценки|Передовые методы оценивания]].  


The other is via the Assignment's '''Settings''' block:
Примечания:
#From the Assignment's summary page, in its Settings block, click '''Advanced grading'''; a new page displays a menu.
*В отсутствие веской причины для отказа включите «Разрешить пользователям просматривать рубрики (иначе рубрики будут доступны только после оценки)», чтобы они заранее знали стандарты, по которым их будут оценивать. Включение опции «Разрешить оценивающему добавлять текстовые примечания к каждому критерию» позволяет экспертам вносить конструктивные предложения по каждому критерию.
#From the '''Change active grading method to''' menu, choose '''Rubric'''; this initiates the rubric setup process.
*Требуются числовые баллы, но если вы хотите использовать свою рубрику для обратной связи без числовой оценки, можно скрыть их от учащихся, так же, как и итоговую расчетную оценку.
*Вы можете ввести отрицательные баллы, например, в качестве штрафа за несвоевременную подачу ответа.
*Вы можете изменить вес любого критерия, установив значение баллов, присвоенных его уровням. Если существует один критерий с уровнями 0, 1, 2, 3, а второй ― с уровнями 0, 2, 4, 6, то влияние последнего на итоговую оценку в два раза больше, чем влияние первого.
*Вы можете использовать клавишу Tab для перехода к следующему уровню/критерию и даже для добавления новых критериев.
*Опция для рубрики «Считать оценку с минимальным баллом, равным минимально достижимой оценке для данной рубрики» позволяет вам выбрать, будет ли оценка рассчитываться так же, как в предыдущих версиях Moodle (флажок снят), или будет использоваться улучшенный метод расчета (флажок отмечен). Пожалуйста, смотрите ниже подробную информацию о расчете.


==Define your rubric==
== Оценка материалов с помощью рубрики ==
[[Файл:Рубрики проверка.png|альт=Рубрики проверка|мини|Рубрики в ходе проверки.]]
# Чтобы получить доступ к представленным материалам, нажмите на ссылку с заданием; откроется страница с кратким описанием.
# Нажмите «Оценить»; на странице «Оценка» будет отображена работа первого студента, указанного в таблице оценок.
# Настроенная вами рубрика будет отображаться в виде таблицы на одной стороне экрана. Вы можете увеличить ее, щелкнув значок Развернуть/Стрелки (виден на скриншоте справа от слова «Оценка»). Чтобы закрепить рубрику, щелкните значок еще раз.
# Для каждого критерия выберите уровень, щелкнув по его ячейке; при выборе уровень отображается затененным (по умолчанию он бледно-зеленый). На скриншоте выбранные уровни хорошо видны.
# Если в форме рубрики включена функция комментариев, вы можете ввести комментарии к каждому критерию. На скриншоте видны окна для комментариев, хотя сами комментарии отсутствуют.
# Сохранить изменения.


[[image:gradingfrom-rubric-editor.png|thumb|right|A rubric]]
Примечания:
To define a new rubric from scratch:
*Помимо рубрики, вы можете добавить краткие комментарии к работе и, при необходимости, файлы отзывов.
#Go to the '''Rubric editor''' via the '''Advanced grading''' link in the assignment's '''Settings''' block.  
*Для каждого критерия должен быть выбран уровень; в противном случае рубрика не будет подтверждена сервером, так как итоговая оценка не сможет быть рассчитана.
#Click '''Define a new rubric from scratch'''.
*Если позже заполнение рубрики будет изменено, ранее выбранный уровень будет временно затенен.
#Type in a brief distinctive '''Name''' and (if needed) a description.
*Возможно, потребуется проинструктировать студентов прокрутить страницу вниз, чтобы найти заполненную рубрику и любые другие комментарии. Пример рубрики по-прежнему отображается в верхней части страницы статуса отправки задания.
#'''Click to edit a criterion''' and '''Click to edit level''' lets you tab through the rubric to type a description and assign points to each level.  
#Describe further criteria and levels as appropriate.
#Set '''Rubric options'''.
#Finally save the rubric definition by clicking '''Save rubric and make it ready''' or '''Save as draft'''. These set the form definition status respectively as described at the [[Advanced grading methods]] page.


Notes:
== Расчет оценки ==
*Unless there is a good reason otherwise, enable '''Allow users to preview rubric''' so that they know in advance the standards by which they will be judged. Enabling '''Remarks''' allows assessors to make constructive suggestions for each criterion.
*Numeric points are required, but if you want to use your rubric to give feedback without a numeric grade it is possible to hide these from students, and hide the final calculated grade from students.
*You can enter negative points, for example as a late submission penalty.
*You can modify the weight of any criterion by setting the value of the points assigned to its levels. If there is one criterion with levels 0, 1, 2, 3 and the second one with levels 0, 2, 4, 6 then the latter's impact on the final grade is twice as much as the former's.
*You can use the Tab key to jump to the next level/criteria and even to add new criteria.
* In Moodle 3.2 onwards, a new rubric option 'Calculate grade based on the rubric having a minimum score of 0' allows you to choose whether the grade is calculated as in previous versions of Moodle (box unticked) or whether an improved calculation method is used (box ticked). Please see below for details of the calculation.


== Grading submissions with a rubric==
Нормализованный балл по рубрике (т.е. в основном процентная оценка) рассчитывается следующим образом:


[[image:gradingfrom-rubric-usage.png|thumb|right|Filling in the rubric to assess an assignment submission]]
[[Файл:Рубрики формула 1.png|альт=Рубрики формула 1]]


#To access the submissions, click a link to the Assignment; its summary page displays.
#Click '''Grade'''; the Student Grading Page displays the work of the first student listed in the Grading Table.
#The rubric you have set up will display as a table on one side of the screen - you can display it larger by clicking its Expand / arrowheads icon (to dock the rubric, click the icon again).
#For each criterion, select a level by clicking in its cell; when selected the level displays shaded (default pale green).
#If enabled on the rubric form, you can type in comments for each criterion.
#Save changes.


Notes:
Примером единственного критерия может быть:  
*As well as the rubric you can add summary '''Feedback comments''' for the work, and optionally '''Feedback files'''.
*A level must be selected for each criterion, otherwise the rubric is not validated by the server as the final grade can't be calculated.
*If the rubric filling is re-edited later, the previously selected level displays temporarily shaded (default: pink).
*Students may need to be instructed to scroll down to find the completed rubric and any other comments - the example rubric continues to display at the top of their assignment '''Submission status''' page.


== Grade calculation ==
'''Общее качество текстового ответа с уровнями'''


The rubric normalized score (i.e. basically a percentage grade) is calculated as
5 - Отличный ответ, 3 - посредственный ответ, 0 - слабый ответ (число соответствует количеству баллов).


: <math>G_s = \frac{\sum_{i=1}^N (g_i - min_i) }{\sum_{i=1}^N (max_i - min_i)}</math>
Пример: пусть у нас есть '''форма оценки с двумя критериями''', каждый из которых имеет четыре уровня: 1, 2, 3, 4. Преподаватель выбирает уровень с 2 баллами по первому критерию и 3 баллами по второму критерию. Тогда нормализованный балл равен:
: where <math>g_i \in \mathbb{N}</math> is the number of points given to the i-th criterion, <math>min_i \in \mathbb{N}</math> is the minimal possible number of points for of the i-th criterion, <math>max_i \in \mathbb{N}</math> is the maximal possible number of points for the i-th criterion and <math>N \in \mathbb{N} </math> is the number of criteria in the rubric.


Example of a single criterion can be: ''Overall quality of the paper'' with the levels ''5 - An excellent paper'', ''3 - A mediocre paper'', ''0 - A weak paper'' (the number represent the number of points).
[[Файл:Рубрики формула 2.png|альт=Рубрики формула 2|300x300пкс]]


''Example:'' let us have an assessment form with two criteria, which both have four levels 1, 2, 3, 4. The teacher chooses level with 2 points for the first criterion and 3 points for the second criterion. Then the normalized score is:
Обратите внимание, что этот расчет может отличаться от того, как вы интуитивно используете рубрики. Например, когда преподаватель в предыдущем примере выбрал оба уровня с 1 баллом, общая сумма составила бы 2 балла. Но на самом деле это наименьший возможный балл, поэтому он соответствует 0-му баллу в Moodle.  


: <math>G_s = \frac{(2 - 1) + (3 - 1)}{(4 - 1) + (4 - 1)} = \frac{3}{6} = 50 %</math>
== Как студенты получают доступ к рубрике ==


Note that this calculation may be different from how you intuitively use rubric. For example, when the teacher in the previous example chose both levels with 1 point, the plain sum would be 2 points. But that is actually the lowest possible score so it maps to the grade 0 in Moodle.  
Если флажок «Разрешить пользователям просматривать рубрики» установлен (рекомендуется), то когда студенты нажимают на задание, к которому прикреплена рубрика, они увидят эту рубрику как часть информации о своем задании. Таким образом, они могут просмотреть рубрику перед отправкой.


==How students access the rubric==
== Как преподаватели получают доступ к рубрике ==
 
Преподаватели увидят рубрику, когда нажмут «Просмотреть/оценить все представленные работы» и получат доступ к работе конкретного студента. По умолчанию они не видят рубрику на странице выставления оценок перед выставлением оценок. Если вы хотите разрешить преподавателям просматривать рубрику, то администратор сайта должен установить для параметра '''mod/assign:viewownsubmissionsummary''' значение «Разрешить» для роли преподавателя в этом задании (или для всего сайта, если это действительно необходимо).
{|
{| class="wikitable"
|[[image:rubricbeforesubmission.png|thumb|How students view a rubric]]
|+
|mod/assign:viewownsubmissionsummary
|Это позволяет пользователю просматривать резюме своей собственной работы.
Эта возможность доступна по умолчанию только для роли студента.
|}
|}


Assuming 'Allow users to preview rubric' is ticked (recommended), when students click on an assignment which has a rubric  attached to it, they will see the rubric as part of the information about their assignment. Thus, they can see the rubric before they submit.
==ЧаВо==
 
==How teachers access the rubric==
Teachers will see the rubric when they click 'View/grade all submissions' and access the work of a particular student. They don't by default see the rubric on the grading page before grading. If you wish to allow teachers to see the rubric, then the site administrator must set the capability [[Capabilities/mod/assign:viewownsubmissionsummary|mod/assign:viewownsubmissionsummary]] to 'Allow' for the editing teacher role in that assignment (or sitewide if really necessary).
 
==FAQ==
===Where do you go to edit a rubric?===
To edit a rubric click on an Assignment and then click Advanced Grading and 'Edit the current form definition.'


===Can you copy rows of the rubric?===
=== Куда нужно перейти, чтобы отредактировать рубрику? ===
Чтобы отредактировать рубрику, щелкните по заданию, затем нажмите '''Передовое оценивание''' и «Изменить заданную в настоящее время форму».


A 'duplicate' button allows you to quickly make a copy of a row:
=== Можно ли копировать строки рубрики? ===


[[File:duplicaterubricrow.png|thumb|600px|center]]
Кнопка «дублировать» позволяет быстро скопировать строку:
[[Файл:Рубрики дублирование строк.png|альт=Рубрики дублирование строк|центр|мини|800x800пкс|Для доступа к дублированию строк рубрики нужно войти в режим редактирования рубрик.]]


===How do you choose another rubric for an assignment?===
=== Как выбрать другую рубрику для задания? ===
From ''Administration>Assignment administration>Advanced grading'' access your rubric and delete it. The see #5 in [[Advanced grading methods]]
В разделе '''Передовое оценивание''' откройте свою рубрику и удалите ее. См. [[Передовые (усовершенствованные) методы оценки#Повторное использование форм оценивания|#5 в Передовые методы оценивания]].


===Why are total grades coming out strange?===
=== Почему итоговые оценки получаются странными? ===


If you are using a criterion without a 0-points level or with a level with negative points, then the rubric option 'When converting rubric score to points/scale assume that minimum number of points is 0' (new in 3.2) should be ticked to avoid unexpected grades.
Если вы используете критерий без уровня в 0 баллов или с уровнем с отрицательными баллами, то следует отметить галочкой параметр рубрики «Считать оценку с минимальным баллом, равным минимально достижимой оценке для данной рубрики», чтобы избежать неожиданных оценок.


==See also==
==See also==


* [[Advanced grading methods]] page for general concepts of advanced grading in Moodle
* [[Advanced grading methods|Передовые (усовершенствованные) методы оценки]]  
* [https://school.moodledemo.net/grade/grading/form/rubric/preview.php?areaid=33 School demo example of student view of rubric] (Log in as username '''student'''/password '''moodle''')
* [http://en.wikipedia.org/wiki/Rubric_(academic) Rubric description] в Википедии.
* [https://school.moodledemo.net/mod/assign/view.php?id=205&rownum=1&action=grade School demo example of teacher view of rubric in student assignment] (Log in as username '''teacher'''/password '''moodle''')
* [http://en.wikipedia.org/wiki/Rubric_(academic) Rubric description] at Wikipedia
* http://rubistar.4teachers.org/ - a free tool to help teachers create quality rubrics
* [https://digiteacher.wordpress.com/2014/11/20/my-teacher-is-a-zombie-marking-by-rubric-on-moodle/ My Teacher is a Zombie – Marking by Rubric on Moodle] Using an electronic rubric frees up the time to ...
 
[[fr:Grille d'évaluation]]
[[de:Rubriken]]
[[es:Rúbricas]]

Текущая версия от 08:02, 18 июля 2025

О рубриках

Рубрики ― это передовой метод оценки, используемый для оценки на основе критериев. Рубрика состоит из набора критериев, сопоставленных с уровнями достижений. Каждому уровню присваивается числовая оценка. Для каждого критерия оценщик выбирает уровень, которого, по его мнению, достигла работа. Итоговая оценка по рубрике рассчитывается как сумма оценок по всем критериям. Итоговая оценка рассчитывается путем сравнения фактической оценки с наихудшей/наилучшей из возможных оценок, которые можно было получить.

Включите рубрики в задание

  1. В настройках вашего задания раскройте раздел «Оценка».
  2. В меню «Метод оценивания» выберите «Рубрики».
  3. Обратите внимание на настройку максимальной оценки ― какую бы числовую оценку вы ни присвоили уровням критериев, итоговая оценка за задание будет пересчитана как доля от этой максимальной оценки.
  4. Сохраните настройки; для этого конкретного задания теперь включены рубрики.

Опишите рубрики

Рубрики (пример)
Рубрики (пример)

Для создания новой рубрики:

  1. Перейдите в редактор рубрик по ссылке Передовое оценивание в блоке настроек задания.
  2. Нажмите кнопку Создать новую рубрику с нуля.
  3. Введите краткое отличительное название и (при необходимости) описание.
  4. Нажмите, чтобы отредактировать критерий и уровень, а также ввести описание и присвоить баллы каждому уровню (см. скриншот справа).
  5. При необходимости добавьте дополнительные критерии и уровни. Обратите внимание, что количество уровней для разных критериев может быть различным и что баллы могут иметь отрицательное значение — например, вычитаться из оценки при опоздании сдачи задания (см. примечания ниже).
  6. Задайте параметры раздела.
  7. Наконец, сохраните определение рубрики, нажав «Сохранить» или «Сохранить как черновик». Эти действия соответственно устанавливают статус определения формы, как описано на странице Передовые методы оценивания.

Примечания:

  • В отсутствие веской причины для отказа включите «Разрешить пользователям просматривать рубрики (иначе рубрики будут доступны только после оценки)», чтобы они заранее знали стандарты, по которым их будут оценивать. Включение опции «Разрешить оценивающему добавлять текстовые примечания к каждому критерию» позволяет экспертам вносить конструктивные предложения по каждому критерию.
  • Требуются числовые баллы, но если вы хотите использовать свою рубрику для обратной связи без числовой оценки, можно скрыть их от учащихся, так же, как и итоговую расчетную оценку.
  • Вы можете ввести отрицательные баллы, например, в качестве штрафа за несвоевременную подачу ответа.
  • Вы можете изменить вес любого критерия, установив значение баллов, присвоенных его уровням. Если существует один критерий с уровнями 0, 1, 2, 3, а второй ― с уровнями 0, 2, 4, 6, то влияние последнего на итоговую оценку в два раза больше, чем влияние первого.
  • Вы можете использовать клавишу Tab для перехода к следующему уровню/критерию и даже для добавления новых критериев.
  • Опция для рубрики «Считать оценку с минимальным баллом, равным минимально достижимой оценке для данной рубрики» позволяет вам выбрать, будет ли оценка рассчитываться так же, как в предыдущих версиях Moodle (флажок снят), или будет использоваться улучшенный метод расчета (флажок отмечен). Пожалуйста, смотрите ниже подробную информацию о расчете.

Оценка материалов с помощью рубрики

Рубрики проверка
Рубрики в ходе проверки.
  1. Чтобы получить доступ к представленным материалам, нажмите на ссылку с заданием; откроется страница с кратким описанием.
  2. Нажмите «Оценить»; на странице «Оценка» будет отображена работа первого студента, указанного в таблице оценок.
  3. Настроенная вами рубрика будет отображаться в виде таблицы на одной стороне экрана. Вы можете увеличить ее, щелкнув значок Развернуть/Стрелки (виден на скриншоте справа от слова «Оценка»). Чтобы закрепить рубрику, щелкните значок еще раз.
  4. Для каждого критерия выберите уровень, щелкнув по его ячейке; при выборе уровень отображается затененным (по умолчанию он бледно-зеленый). На скриншоте выбранные уровни хорошо видны.
  5. Если в форме рубрики включена функция комментариев, вы можете ввести комментарии к каждому критерию. На скриншоте видны окна для комментариев, хотя сами комментарии отсутствуют.
  6. Сохранить изменения.

Примечания:

  • Помимо рубрики, вы можете добавить краткие комментарии к работе и, при необходимости, файлы отзывов.
  • Для каждого критерия должен быть выбран уровень; в противном случае рубрика не будет подтверждена сервером, так как итоговая оценка не сможет быть рассчитана.
  • Если позже заполнение рубрики будет изменено, ранее выбранный уровень будет временно затенен.
  • Возможно, потребуется проинструктировать студентов прокрутить страницу вниз, чтобы найти заполненную рубрику и любые другие комментарии. Пример рубрики по-прежнему отображается в верхней части страницы статуса отправки задания.

Расчет оценки

Нормализованный балл по рубрике (т.е. в основном процентная оценка) рассчитывается следующим образом:

Рубрики формула 1


Примером единственного критерия может быть:

Общее качество текстового ответа с уровнями

5 - Отличный ответ, 3 - посредственный ответ, 0 - слабый ответ (число соответствует количеству баллов).

Пример: пусть у нас есть форма оценки с двумя критериями, каждый из которых имеет четыре уровня: 1, 2, 3, 4. Преподаватель выбирает уровень с 2 баллами по первому критерию и 3 баллами по второму критерию. Тогда нормализованный балл равен:

Рубрики формула 2

Обратите внимание, что этот расчет может отличаться от того, как вы интуитивно используете рубрики. Например, когда преподаватель в предыдущем примере выбрал оба уровня с 1 баллом, общая сумма составила бы 2 балла. Но на самом деле это наименьший возможный балл, поэтому он соответствует 0-му баллу в Moodle.

Как студенты получают доступ к рубрике

Если флажок «Разрешить пользователям просматривать рубрики» установлен (рекомендуется), то когда студенты нажимают на задание, к которому прикреплена рубрика, они увидят эту рубрику как часть информации о своем задании. Таким образом, они могут просмотреть рубрику перед отправкой.

Как преподаватели получают доступ к рубрике

Преподаватели увидят рубрику, когда нажмут «Просмотреть/оценить все представленные работы» и получат доступ к работе конкретного студента. По умолчанию они не видят рубрику на странице выставления оценок перед выставлением оценок. Если вы хотите разрешить преподавателям просматривать рубрику, то администратор сайта должен установить для параметра mod/assign:viewownsubmissionsummary значение «Разрешить» для роли преподавателя в этом задании (или для всего сайта, если это действительно необходимо).

mod/assign:viewownsubmissionsummary Это позволяет пользователю просматривать резюме своей собственной работы.

Эта возможность доступна по умолчанию только для роли студента.

ЧаВо

Куда нужно перейти, чтобы отредактировать рубрику?

Чтобы отредактировать рубрику, щелкните по заданию, затем нажмите Передовое оценивание и «Изменить заданную в настоящее время форму».

Можно ли копировать строки рубрики?

Кнопка «дублировать» позволяет быстро скопировать строку:

Рубрики дублирование строк
Для доступа к дублированию строк рубрики нужно войти в режим редактирования рубрик.

Как выбрать другую рубрику для задания?

В разделе Передовое оценивание откройте свою рубрику и удалите ее. См. #5 в Передовые методы оценивания.

Почему итоговые оценки получаются странными?

Если вы используете критерий без уровня в 0 баллов или с уровнем с отрицательными баллами, то следует отметить галочкой параметр рубрики «Считать оценку с минимальным баллом, равным минимально достижимой оценке для данной рубрики», чтобы избежать неожиданных оценок.

See also