Свойства вопросов: различия между версиями

Материал из База знаний Центра ПУСК МФТИ
ВизуальныйВики-текст
1>Marycooch
clarifying manual grading
 
 
(не показано 6 промежуточных версий 2 участников)
Строка 1: Строка 1:
{{Questions}}
{{Questions}}
==How questions behave==
The following question behaviours are available when [[Quiz settings|creating a quiz]] (also when previewing questions):


;Deferred feedback
== Как работают вопросы в тестах ==
:Students must enter an answer to each question and then submit the entire quiz before anything is graded or they get any feedback.
При [[Quiz settings|создании теста]] (а также при предварительном просмотре вопросов) доступны следующие варианты ответов:
;Adaptive mode and Adaptive mode (no penalties)
:Allows students to have multiple attempts at the question before moving on to the next question. This behaviour requires that the "Whether correct" box is ticked under "During the attempt" in the "Review options" section, at a minimum.
;Manual grading (disabled by default)
:This is disabled by default because of potential confusion when selecting a question behaviour.  If it is enabled and you select manual grading here, then learners will not get a result until you have manually graded all their questions. Think very carefully about this!
;Interactive with multiple tries
:Used for allowing multiple attempts on the same question (perhaps with a grade penalty). Students answer the question and click the 'Check' button. If the answer is wrong, the student can click the 'Try again' button to try a new response. Importantly, the question definition must contain hints that will be shown after each incorrect attempt, though the hint text can be as minimal as an HTML non-breaking space. Once the student has got the question right, they can no longer change their response. Once the student has got the question wrong too many times, they are just graded wrong (or partially correct) and get shown the feedback. Unless 'Allow redo within an attempt' was enabled in the '[[Quiz_settings#Question_behaviour|Question behaviour]]' settings of the quiz, they can no longer change their answer. There can be specific feedback after each attempt the student makes, in addition to overall feedback about incorrect or correct answers and answer choices. The number of tries the student gets is the number of hints in the question definition plus one, with a minimum of three.
;Immediate feedback
:Similar to interactive mode in that the student can submit their response immediately during the quiz attempt, and get it graded. However, they can only submit one response, they cannot change it later.
;Deferred feedback or Immediate feedback with Certainty-based marking (CBM)
:With CBM, the student does not only answer the question, but they also indicate how sure they are they got the question right. The grading is adjusted by the choice of certainty so that students have to reflect honestly on their own level of knowledge in order to get the best mark.
;Conditional questions
:If using the Interactive with multiple tries or Immediate Feedback behaviour and with the navigation method set to 'Free', it is possible to make the display of a question dependent on a previous question being answered first.
:The question editing page will display padlock icons to the right of each question.


==Certainty-based marking==
;Отложенная обратная связь
When a student answers a question they also have to state how sure they are of the answer: not very (less than 67%); fairly (more than 67%) or very (more than 80%). Their grading is then adjusted according to how certain they are, which means that for example if they answered correctly but were only guessing, their mark is adjusted from 1 to 0.33. If they answered wrongly but were very sure, their mark is adjusted from 0 to -2.  
:Учащиеся должны ввести ответ на каждый вопрос, а затем отправить весь тест целиком, прежде чем что-либо будет оценено или они получат какие-либо отзывы.
;Адаптивный режим и адаптивный режим без штрафных санкций
:Позволяет учащимся сделать несколько попыток ответить на вопрос, прежде чем переходить к следующему. Для этого необходимо, как минимум, установить флажок «Правилен ли ответ» в разделе «Во время попытки» в разделе «Настройки просмотра».
;Ручное оценивание (по умолчанию отключено)
:По умолчанию эта функция отключена из-за возможной путаницы при выборе свойств вопросов. Если она включена и вы выберете ручную оценку, учащиеся не получат результат, пока вы вручную не оцените все их вопросы. Подумайте об этом!
;Интерактивный режим с несколькими попытками
:Используется для того, чтобы разрешить несколько попыток ответа на один и тот же вопрос (возможно, со штрафными оценками). Учащиеся отвечают на вопрос и нажимают кнопку «Проверить». Если ответ неверный, учащийся может нажать кнопку «Повторить попытку», чтобы попробовать новый ответ. Важно отметить, что определение вопроса должно содержать подсказки, которые будут отображаться после каждой неверной попытки, хотя текст подсказки может быть минимальным, всего лишь через пробел в формате HTML. Как только учащийся правильно ответил на вопрос, он больше не сможет изменить свой ответ. Если учащийся слишком часто задает вопрос неправильно, ему просто выставляется неправильная оценка (или частично правильная) и показывается обратная связь. Если в настройках теста [[Quiz settings#Question behaviour|Режим поведения вопросов]] не включена опция Разрешить повторный ответ в попытке, он больше не может изменить свой ответ. После каждой попытки учащийся может получать конкретную обратную связь в дополнение к общим отзывам о неправильных или правильных ответах и вариантах ответов. Количество попыток, которые получает учащийся, равно количеству подсказок в определении вопроса плюс одна (минимум три).
;Немедленная обратная связь
:Аналогично интерактивному режиму в том, что учащийся может отправить свой ответ сразу же во время прохождения теста и получить за него оценку. Однако он может отправить только один ответ и не может изменить его позже.
;Отложенная обратная связь или немедленная обратная связь с оценкой, основанной на уверенности (CBM)
:С помощью CBM учащийся не только отвечает на вопрос, но и показывает, насколько он уверен, что правильно ответил на него. Оценка определяется выбором степени уверенности, так что учащимся приходится честно оценивать свой уровень знаний, чтобы получить наилучшую оценку.
;Условные вопросы (каждая попытка основывается на предыдущей)
:При использовании интерактивного режима с несколькими попытками или немедленной обратной связью, а также при выборе метода навигации «Свободный», можно настроить отображение вопроса в зависимости от того, на какой предыдущий вопрос был дан ответ первым.
:На странице редактирования вопроса справа от каждого вопроса будут отображаться значки замков.


For detailed information on how CBM works and how students can benefit from it, see [[Using certainty-based marking]].
==Отметка об уверенности (ОоУ)==
{|
Когда студент отвечает на вопрос, он также должен указать, насколько он уверен в ответе: не уверен (менее 67%); промежуточный (более 67%) или уверен (более 80%). Затем их оценка корректируется в зависимости от степени их уверенности, что означает, что, например, если они ответили правильно, но только наугад, их оценка корректируется с 1 до 0,33. Если они ответили неправильно, но были абсолютно уверены, их оценка корректируется с 0 до -2.  
| [[File:cbm03.png|thumb|correct answer; very sure]]
| [[File:cbm05.png|thumb|correct answer; fairly sure]]
| [[File:cmb04.png|thumb|correct answer; not very sure]]
| [[File:cbm01.png|thumb|wrong answer; very sure]]
| [[File:cbm99.png|thumb|wrong answer; not very sure]]
|}


==Managing question behaviours==
Подробную информацию о том, как работает ОоУ и как учащиеся могут извлечь из этого пользу, смотрите в разделе [[Using certainty-based marking|Использование оценки, основанной на уверенности]].
[[Файл:Правильно уверен.png|альт=Правильно уверен|без|мини|900x900пкс|Правильный ответ, оценка за который была увеличена, потому что студент уверен в ответе.]]
[[Файл:Неправильно но уверен.png|альт=Неправильно но уверен|без|мини|900x900пкс|Неправильный ответ, оценка за который была снижена, потому что студент уверен в ответе (в примере вопрос совсем простой и студент, видимо, просто допустил опечатку; но системе причина ошибки безразлична, надо было проверять).]]
[[Файл:Неправильно промежуточно.png|альт=Неправильно промежуточно|без|мини|900x900пкс|Неправильный ответ, в котором студент не очень-то и уверен.]]
[[Файл:Неправильно не уверен.png|альт=Неправильно не уверен|без|мини|900x900пкс|Неправильный ответ, в котором студент не уверен.]]
В итоге результаты теста отображаются не только общим баллом, но еще и характеристикой того, в правильных ли случаях студент сомневается:
[[Файл:Разбивка по уверенности.png|альт=Разбивка по уверенности|без|мини|800x800пкс|В этом тесте студент правильно определяет выраженную уверенность и сомнения и хуже ― промежуточные ситуации.]]


An administrator can manage question behaviours available across the site in ''Administration > Site administration > Plugins > Question behaviours > Manage question behaviours''.
==Управление свойствами вопросов==


==Deferred feedback with explanation==
Администратор может управлять поведением вопросов, доступным на сайте, в разделе Администрирование > Плагины > Поведение вопросов > Управление поведением вопросов.  
[https://moodle.org/plugins/view.php?plugin=qbehaviour_deferredfeedbackexplain Deferred feedback with explanation] is an additional question behaviour, available for Moodle 2.6+,  that is just like deferred feedback, but with an additional input box where students can give a reason why they gave the answer they did. No attempt is made to automatically grade the explanation, nor is it required.
* It may be used in various ways, for example:
** The teacher may want to manually edit the grades where the student gave a wrong answer, to give partial credit if the student used the right method or approach.
** The student might want to explain their thinking, so that later when the results and feedback are revealed, they are reminded of what they were thinking at the time, and so can reflect more deeply.
* You can use [[Language customization]] to change the default text string "Explain your reasons"  in the file qbehaviour_deferredfeedbackexplain.php to a more specific text such as "Enter justifications below if you want partial credit in numerical problems by showing your steps, ignore otherwise." as described in https://moodle.org/mod/forum/discuss.php?d=275752


==Interactive with explanation==
== Вопросы с отзывом студентов ==
[[qbehaviour interactiveexplain]] is an additional question behaviour, available for Moodle 3.x, that is based heavily on Tim Hunt's deferred feedback with explanation question behaviour. This behaviour is like the interactive with multiple attempts behaviour, but with an additional text box where students can give a reason why they gave the answer they did. No attempt is made to automatically grade the explanation, nor is it required. The code can be found at https://github.com/marcusgreen/moodle-qbehaviour_interactiveexplain
[https://moodle.org/plugins/view.php?plugin=qbehaviour_deferredfeedbackexplain Вопросы с отзывом студентов] ― это дополнительный вариант ответа на вопрос, доступный в Moodle 2.6+, который похож на отложенную обратную связь, но с дополнительным полем ввода, в котором учащиеся могут указать причину, по которой они дали тот ответ, который они дали. Не предпринимается попыток автоматически оценить объяснение, да это и не требуется.  


==See also==
Это может быть использовано различными способами, например:
 
* Учитель может захотеть вручную отредактировать оценки, в которых ученик дал неправильный ответ, чтобы поставить частичный зачет, если ученик использовал правильный метод или подход.  
* [http://www.ucl.ac.uk/lapt/ LAPT: UCL home of Certainty-Based Marking]
* Возможно, учащийся захочет объяснить свои соображения, чтобы позже, когда будут опубликованы результаты и обратная связь, ему напомнили о том, о чем он думал в то время, и таким образом он мог поразмыслить более глубоко.
* [https://moodle.org/mod/forum/discuss.php?d=225920 CBM too harsh?] forum discussion
Вы можете использовать [[Language customisation|языковую настройку]], чтобы изменить текстовую строку по умолчанию «Объясните свои причины» в файле qbehaviour_deferredfeedbackexplain.php на более подробный текст, например, «Введите обоснования ниже, если вы хотите получить частичный зачет в задачах с числами, указав свои шаги, в противном случае игнорируйте».
* [http://school.moodledemo.net/mod/quiz/view.php?id=1496  School demo example of a quiz with CBM]  Log into with username "parent" and password "moodle"
* [http://helderenwijzer.nl/2011/10/certainty-based-marking-in-moodle/ Certainty Based Marking in Moodle] blog post by Isabelle Langeveld
* [http://www.open.edu/openlearnworks/mod/oucontent/view.php?id=51788&section=6 Styles of interactive computer marked assessments] from the Open University
*[https://moodle.org/mod/forum/discuss.php?d=313947 This forum thread] about adding an 'all or nothing'  behaviour for adaptive and deferred feedback for questions in a quiz.
 
 
[[Category:Site administration]]
 
[[de:Frageverhalten]]
[[es:Comportamientos de preguntas]]
[[fr:Comportements de question]]

Текущая версия от 13:15, 7 августа 2025

Main page ► Managing a Moodle course ► Questions ► Свойства вопросов
Questions



Как работают вопросы в тестах

При создании теста (а также при предварительном просмотре вопросов) доступны следующие варианты ответов:

Отложенная обратная связь
Учащиеся должны ввести ответ на каждый вопрос, а затем отправить весь тест целиком, прежде чем что-либо будет оценено или они получат какие-либо отзывы.
Адаптивный режим и адаптивный режим без штрафных санкций
Позволяет учащимся сделать несколько попыток ответить на вопрос, прежде чем переходить к следующему. Для этого необходимо, как минимум, установить флажок «Правилен ли ответ» в разделе «Во время попытки» в разделе «Настройки просмотра».
Ручное оценивание (по умолчанию отключено)
По умолчанию эта функция отключена из-за возможной путаницы при выборе свойств вопросов. Если она включена и вы выберете ручную оценку, учащиеся не получат результат, пока вы вручную не оцените все их вопросы. Подумайте об этом!
Интерактивный режим с несколькими попытками
Используется для того, чтобы разрешить несколько попыток ответа на один и тот же вопрос (возможно, со штрафными оценками). Учащиеся отвечают на вопрос и нажимают кнопку «Проверить». Если ответ неверный, учащийся может нажать кнопку «Повторить попытку», чтобы попробовать новый ответ. Важно отметить, что определение вопроса должно содержать подсказки, которые будут отображаться после каждой неверной попытки, хотя текст подсказки может быть минимальным, всего лишь через пробел в формате HTML. Как только учащийся правильно ответил на вопрос, он больше не сможет изменить свой ответ. Если учащийся слишком часто задает вопрос неправильно, ему просто выставляется неправильная оценка (или частично правильная) и показывается обратная связь. Если в настройках теста Режим поведения вопросов не включена опция Разрешить повторный ответ в попытке, он больше не может изменить свой ответ. После каждой попытки учащийся может получать конкретную обратную связь в дополнение к общим отзывам о неправильных или правильных ответах и вариантах ответов. Количество попыток, которые получает учащийся, равно количеству подсказок в определении вопроса плюс одна (минимум три).
Немедленная обратная связь
Аналогично интерактивному режиму в том, что учащийся может отправить свой ответ сразу же во время прохождения теста и получить за него оценку. Однако он может отправить только один ответ и не может изменить его позже.
Отложенная обратная связь или немедленная обратная связь с оценкой, основанной на уверенности (CBM)
С помощью CBM учащийся не только отвечает на вопрос, но и показывает, насколько он уверен, что правильно ответил на него. Оценка определяется выбором степени уверенности, так что учащимся приходится честно оценивать свой уровень знаний, чтобы получить наилучшую оценку.
Условные вопросы (каждая попытка основывается на предыдущей)
При использовании интерактивного режима с несколькими попытками или немедленной обратной связью, а также при выборе метода навигации «Свободный», можно настроить отображение вопроса в зависимости от того, на какой предыдущий вопрос был дан ответ первым.
На странице редактирования вопроса справа от каждого вопроса будут отображаться значки замков.

Отметка об уверенности (ОоУ)

Когда студент отвечает на вопрос, он также должен указать, насколько он уверен в ответе: не уверен (менее 67%); промежуточный (более 67%) или уверен (более 80%). Затем их оценка корректируется в зависимости от степени их уверенности, что означает, что, например, если они ответили правильно, но только наугад, их оценка корректируется с 1 до 0,33. Если они ответили неправильно, но были абсолютно уверены, их оценка корректируется с 0 до -2.

Подробную информацию о том, как работает ОоУ и как учащиеся могут извлечь из этого пользу, смотрите в разделе Использование оценки, основанной на уверенности.

Правильно уверен
Правильный ответ, оценка за который была увеличена, потому что студент уверен в ответе.
Неправильно но уверен
Неправильный ответ, оценка за который была снижена, потому что студент уверен в ответе (в примере вопрос совсем простой и студент, видимо, просто допустил опечатку; но системе причина ошибки безразлична, надо было проверять).
Неправильно промежуточно
Неправильный ответ, в котором студент не очень-то и уверен.
Неправильно не уверен
Неправильный ответ, в котором студент не уверен.

В итоге результаты теста отображаются не только общим баллом, но еще и характеристикой того, в правильных ли случаях студент сомневается:

Разбивка по уверенности
В этом тесте студент правильно определяет выраженную уверенность и сомнения и хуже ― промежуточные ситуации.

Управление свойствами вопросов

Администратор может управлять поведением вопросов, доступным на сайте, в разделе Администрирование > Плагины > Поведение вопросов > Управление поведением вопросов.

Вопросы с отзывом студентов

Вопросы с отзывом студентов ― это дополнительный вариант ответа на вопрос, доступный в Moodle 2.6+, который похож на отложенную обратную связь, но с дополнительным полем ввода, в котором учащиеся могут указать причину, по которой они дали тот ответ, который они дали. Не предпринимается попыток автоматически оценить объяснение, да это и не требуется.

Это может быть использовано различными способами, например:

  • Учитель может захотеть вручную отредактировать оценки, в которых ученик дал неправильный ответ, чтобы поставить частичный зачет, если ученик использовал правильный метод или подход.
  • Возможно, учащийся захочет объяснить свои соображения, чтобы позже, когда будут опубликованы результаты и обратная связь, ему напомнили о том, о чем он думал в то время, и таким образом он мог поразмыслить более глубоко.

Вы можете использовать языковую настройку, чтобы изменить текстовую строку по умолчанию «Объясните свои причины» в файле qbehaviour_deferredfeedbackexplain.php на более подробный текст, например, «Введите обоснования ниже, если вы хотите получить частичный зачет в задачах с числами, указав свои шаги, в противном случае игнорируйте».

Источник — https://wiki.mipt.ru/index.php?title=Свойства_вопросов&oldid=32265