Обновления Экзамуса в декабре 2020

Улучшения AI

1. Обновление нейросети для распознавания лиц

Мы стали получать сигналы от некоторых наших заказчиков, что распознавание лиц стало работать недостаточно эффективно. Расследование показало, что лица в масках оказываются “невидимыми” для текущего алгоритма. Мы натренировали нейросеть по распознаванию лиц на лицах в масках, теперь она работает гораздо эффективнее. Отметим, что обновление особенно актуально для заказчиков на Ближнем Востоке 🙂

2. Длительность нарушений, новый скоринг с учетом длительностей нарушений

Мы работаем над улучшением автоматических алгоритмов распознавания “читеров”, необходимым условием является сбор детальных данных о поведении студента. Если раньше мы фиксировали нарушение и его тип, то сейчас отмечаем также его длительность. Это изменение позволило переработать алгоритм скоринга. С учетом возможности настройки дополнительных параметров по весу каждого типа нарушения, в некоторых случаях точность метода скоринга повысилась на 55%.

3. Разметка нарушений на видео — релиз (права, учетная запись разметчика, интерфейс разметки)

Это не касается напрямую алгоритмов распознавания, но тем не менее, один из важнейших шагов на пути к построению полностью автономного решения прокторинга. Мы разработали специальный интерфейс разметки видео для тренировки AI. Это, например, позволит в два раза сократить время обновлениями нейросетей детекции устройств.

Новый функционал

1. НОВЫЙ тип прокторинга AUTO — автоматическая отправка статуса сессии по результатам скоринга (ниже порога — ОК, выше порога — нарушитель)

Мы придерживаемся позиции, что нельзя выносить суждение только на основе автоматических алгоритмов, поэтому рекомендуем проводить просмотр всех записей. Однако при объемах в десятки и сотни тысяч наш алгоритм скоринга оказался крайне востребованным. Мы добавили новый режим прокторинга, где результат выставляется только автоматикой.

2. Интерфейс массового создания / изменения персонала (прокторы, тьюторы)

В одном из проектов мы за месяц провели более 100 тысяч экзаменов с прокторингом. Заказчик проводил массовый просмотр записей, ему требовалось в кратчайшие сроки добавлять сотни учетных записей для прокторов. Сотрудники поддержки устали их создавать руками, попросили разработчиков помочь. Получился такой модуль.

3. Вебапп для тестов с пропуском страниц проверки

Десятки партнеров интегрируют Экзамус в свои системы. Естественно, регулярно требуется тестирование работы интеграции. Обязательным этапом подключения студента является проверка связи, которая занимает до нескольких минут. По просьбе нескольких партнеров мы создали специальный режим отладки, где пропущена полная проверка оборудования и связи, что позволяет сэкономить в совокупности часы сотрудников отделов тестирования наших партнеров.

4. Электрон в SI

Существенные изменения политик безопасности, которые появились за последний год в Chromium based браузерах, вызывают ряд технических проблем у некоторых студентов. Для того, чтобы максимально снизить технические проблемы от использования специфических браузеров, мы создали свой легкий браузер с функциями lockdown, который рекомендуем к использованию.

Новое для прокторов

1. Таймлайн в новом архиве

В новой версии архива добавили информативный таймлайн, на котором видно, в какой момент экзамена было больше всего нарушений.

2. В новый архив добавлены отчеты по сессии

Разработали более удобные отчеты по сессиям с отражением типов нарушений, их длительностью и т.д. Эти отчеты преподаватели часто используют для принятия решения без необходимости просмотра всей видеозаписи.