Что такое скоринг?
Скоринг - это методика автоматического расчета оценки прокторинга
Методика определяет для каждого типа нарушения балл, который будет начислен в случае если это нарушение было зафиксировано.
Методика принимает во внимание следующие факторы:
- присутствует погрешность в работе автоматики;
- нарушение не дискретно и имеет длительность (киберпроктор может сообщать несколько раз об одном нарушении, если нарушение длительное).
Расчет баллов за нарушения
Нарушения разбиваются на две группы
Нарушения разбиваются на две группы
значительное (strong) и незначительное (light)
Значительные нарушения:
- отсутствие тестируемого;
- подмена тестируемого;
- смена активного окна;
- используются запрещенные сайты/ПО;
Незначительные нарушения:
- увод взгляда;
- наличие еще одного человека в кадре;
- разговор во время экзамена.
Обратите внимание
1
Организатор тестирования сам задает порог (значение, выше которого прокторинг считается отклоненным).
2
Организатор тестирования задает количество значительных и незначительных нарушений, которое допустимо в рамках экзаменационного мероприятия, например: допускается 5 значительных нарушений или 8 незначительных.
3
Исходя из заданного порога и количества нарушений, рассчитывается эталонный вес каждого нарушения.
Например: порог=80, допустимо 4 значительных или 8 незначительных нарушений.
Тогда, вес значительного нарушения равен 20 баллам, вес незначительного нарушения 10 баллам. Веса 20 и 10 являются эталонными.
Если проктор отметил в экзамене студента 2 значительных нарушения и 5 незначительных, то в сумме студент набирает 90 баллов при пороге для сдачи равном 80.
Прокторинг считается отклоненным.
Например: порог=80, допустимо 4 значительных или 8 незначительных нарушений.
Тогда, вес значительного нарушения равен 20 баллам, вес незначительного нарушения 10 баллам. Веса 20 и 10 являются эталонными.
Если проктор отметил в экзамене студента 2 значительных нарушения и 5 незначительных, то в сумме студент набирает 90 баллов при пороге для сдачи равном 80.
Прокторинг считается отклоненным.
4
Нарушение, зафиксированное проктором, считается истинным и имеет эталонный вес нарушения (в предыдущем примере 20 для значительного, 10 для незначительного).
5
Нарушение, зафиксированное киберпроктором, обрабатывается по компенсационной формуле с применением понижающего коэффициента и имеет вес, меньший эталонного.
Например: автоматическое нарушение “увод взгляда” считается истинным только в том случае, если оно зафиксировано не менее N раз в промежуток времени t, и его вес равен половине эталонного веса.
Например: автоматическое нарушение “увод взгляда” считается истинным только в том случае, если оно зафиксировано не менее N раз в промежуток времени t, и его вес равен половине эталонного веса.