В этом материале мы расскажем, по каким критериям выбирать метод прокторинга и какие заказчики выбирают конкретные решения.
1. Синхронный прокторинг
Обычно используется на письменных экзаменах. В связке с ИИ в режиме реального времени за пользователем наблюдает специально обученный человек – проктор. Он проводит идентификацию личности, контролирует соблюдение всех процедур и может комментировать действия экзаменуемого в специальном чате. Перед тем, как допустить учащегося к экзамену, проктор также должен убедиться, что у него нет каких-либо запрещенных материалов или устройств. Как показывает практика, это сразу отсеивает большую часть «читеров» и дает понять студентам, что наблюдатели настроены серьезно.
Проктор может прервать экзамен, пометив его как недостоверный, если пользователь нарушает правила: например, списывает и не реагирует на замечания проктора в чате. Один специалист может одновременно сопровождать экзамен для 9 студентов.
➕ Плюсы
Высокая точность – благодаря синхронизации работы ИИ и проктора можно выявлять скрытые нарушения в режиме реального времени. Это гарантирует, что экзамен пройдет максимально прозрачно.
➖ Минусы
Высокая стоимость. Помимо целого штата прокторов, необходима также бесперебойная работа сотрудников технической поддержки. В случае, если проводятся массовые экзамены, такой формат довольно трудозатратен.
❔Когда используют
Университеты используют синхронный прокторинг при проведении важных итоговых экзаменов (например, ГИА или ГОСы). У корпоративных клиентов, как правило, такой способ применяется для тестирования лиц, претендующих на высокую должность.
2. Асинхронный прокторинг с постпроверкой
Идентификация личности, а также весь ход экзамена обеспечивается программно. Искусственный интеллект в автоматическом режиме отслеживает некоторые запрещенные действия:
1. отсутствие в кадре студента;
2. второй человек в кадре;
3. разговоры во время экзамена;
4. использование наушников и телефонов;
5. подключение второго монитора.
ИИ-проктор способен фиксировать нарушения, но не прерывает экзамен. В процессе тестирования ведется видеозапись с веб-камеры студента и рабочего стола его компьютера. Постпроверку видео осуществляет человек-проктор, который либо подтверждает нарушение правил, либо признаёт экзамен сданным честно и без подсказок.
➕ Плюсы
Менее затратный в сравнении с синхронным вид прокторинга. Он не требует согласования графиков прокторов и предполагает выборочную, а не полную перепроверку видеозаписей. Кроме того, сокращается количество персонала, необходимого для проверки пользователей.
➖ Минусы
При использовании выборочной проверки видео этот тип прокторинга дает чуть менее репрезентативные результаты. Однако этот риск можно минимизировать, если просматривать видеозаписи со всеми экзаменуемыми.
❔Когда используют
Асинхрон – самый популярный тип прокторинга: более чем в 90% случаев заказчики выбирают его. Этот метод хорошо подходит для проведения массовых и регулярных экзаменов. Клиенты «Экзамуса» нередко хвалят его за компромисс между стоимостью и эффективностью.
3. Автоматический прокторинг
Автоматический прокторинг похож на асинхронный, но его отличие в том, что он практически полностью проходит без участия человека. Результаты предоставляются заказчику в форме отчета-выгрузки из системы. В нем указаны ФИО тестируемого, его логин в системе, дата и время тестирования, название экзамена, а также статус проверки «yes» для тестирования без нарушений, «no» для тестирований с нарушениями) и тип нарушения. На основе отчета заказчик принимает решение, засчитывать ли сотруднику результат тестирования. В спорных случаях или при апелляциях «Экзамус» всегда проводит повторный просмотр видео прокторами.
➕ Плюсы
Наименее затратный вид прокторинга – он практически не требует вовлечения человеческих ресурсов, за исключением техподдержки.
➖ Минусы
Наилучшим образом работает связка ИИ-человек-проктор. Она обеспечивает гарантию обнаружения всех способов нарушений. В одиночку ИИ пока способен видеть лишь часть запрещенных действий и может ошибочно трактовать некоторые эпизоды.
❔Когда используют
Чаще всего автоматический прокторинг используется для проведения олимпиад. При этом, чтобы избежать ошибок при выборе победителя, видеозаписи с лучшими результатами повторно просматриваются прокторами на предмет нарушений.
Таким образом, каждый заказчик может выбрать свой тип прокторинга в зависимости от задач, бюджета и важности конкретного экзамена.
