Что такое скоринг?

Скоринг - это методика автоматического расчета оценки прокторинга

Методика определяет для каждого типа нарушения балл, который будет начислен в случае если это нарушение было зафиксировано.


Методика принимает во внимание следующие факторы:

  • присутствует погрешность в работе автоматики;
  • нарушение не дискретно и имеет длительность (киберпроктор может сообщать несколько раз об одном нарушении, если нарушение длительное).
Расчет баллов за нарушения
Нарушения разбиваются на две группы

значительное (strong) и незначительное (light)

Значительные нарушения:
  • отсутствие тестируемого;
  • подмена тестируемого;
  • смена активного окна;
  • используются запрещенные сайты/ПО;
Незначительные нарушения:
  • увод взгляда;
  • наличие еще одного человека в кадре;
  • разговор во время экзамена.
Обратите внимание
1
Организатор тестирования сам задает порог (значение, выше которого прокторинг считается отклоненным).
2
Организатор тестирования задает количество значительных и незначительных нарушений, которое допустимо в рамках экзаменационного мероприятия, например: допускается 5 значительных нарушений или 8 незначительных.
3
Исходя из заданного порога и количества нарушений, рассчитывается эталонный вес каждого нарушения.
Например: порог=80, допустимо 4 значительных или 8 незначительных нарушений.
Тогда, вес значительного нарушения равен 20 баллам, вес незначительного нарушения 10 баллам. Веса 20 и 10 являются эталонными.
Если проктор отметил в экзамене студента 2 значительных нарушения и 5 незначительных, то в сумме студент набирает 90 баллов при пороге для сдачи равном 80.

Прокторинг считается отклоненным.
4
Нарушение, зафиксированное проктором, считается истинным и имеет эталонный вес нарушения (в предыдущем примере 20 для значительного, 10 для незначительного).
5
Нарушение, зафиксированное киберпроктором, обрабатывается по компенсационной формуле с применением понижающего коэффициента и имеет вес, меньший эталонного.

Например: автоматическое нарушение “увод взгляда” считается истинным только в том случае, если оно зафиксировано не менее N раз в промежуток времени t, и его вес равен половине эталонного веса.