Онлайн-прокторинг:для кого, зачем и как он работает
Спрос на онлайн-образование постепенно растет, а онлайн-экзамены и сертификаты давно стали нормой. Однако большинство университетов, школ и других учреждений столкнулось с тем, что в удаленном режиме практически невозможно отследить, насколько ученики вовлечены в процесс обучения. Кроме того, при сдаче экзаменов в онлайн-формате у студентов появляется множество возможностей для списывания и других способов облегчения тестирования. Пройти онлайн тест с прокторингом можно тут.
Коронакризис и вынужденный перевод всех студентов на удаленку поставил перед образовательными учреждениями задачу решить проблемы контроля как можно быстрее. На помощь пришли системы онлайн-прокторинга на основе ИИ-технологий (AI online proctoring).
Что такое онлайн-прокторинг
Онлайн-прокторинг – это система мониторинга, которая автоматически обнаруживает любые запрещенные действия перед и во время экзамена. Наблюдение ведется из трех источников: аудио-, видеопоток и запись экрана рабочего стола. При попытке открыть другую вкладку в браузере (кроме окна с экзаменом) или подсмотреть/подслушать подсказку система автоматически помечает нарушение и отправляет информацию экзаменатору. Как правило, за ходом прокторинга всегда наблюдает проктор – специально обученный сотрудник, который отслеживает, не допустила ли система ошибку. Система одинаково хорошо работает как с отдельными пользователями, так и с тысячами людей. Все, что требуется для проверки, – это стабильное подключение к интернету, а также компьютер или ноутбук с поддержкой веб-камеры и микрофона.
Типы прокторинга
1. Синхронный прокторинг с прокторами
Обычно используется на письменных экзаменах (тестировании). За ходом экзамена в режиме реального времени наблюдает сторонний проктор. Его задача – контролировать прозрачность проведения экзамена. Проктор проводит идентификацию личности студента, контролирует соблюдение всех процедур и может комментировать действия студента в специальном чате. Ведется видеозапись с двух потоков: с веб-камеры студента и рабочего стола его компьютера. Проктор может прервать экзамен, пометив его как недостоверный, в случае возникновения перечисленных в инструкции нарушений: например, студент списывает и не реагирует на замечания проктора в чате. Один проктор может одновременно сопровождать экзамен для 6 студентов. Это самый точный, но и самый затратный вид прокторинга.
2. Асинхронный прокторинг с постпроверкой
Идентификация личности, а также весь ход экзамена обеспечивается программно, система в автоматическом режиме отслеживает некоторые запрещенные действия:
1. отсутствие в кадре студента;
2. второй человек в кадре;
3. разговор во время экзамена;
4. подключение второго монитора.
В случае фиксации нарушений система помечает видео соответствующего экзамена как недостоверное, но экзамен не прерывает. В процессе тестирования ведется видеозапись с веб-камеры студента и рабочего стола его компьютера. Постпроверку видео осуществляет сотрудник университета, который либо подтверждает нарушение процедуры со стороны студента, либо признаёт экзамен сданным. Менее затратный по ресурсам вид прокторинга: он не требует согласования графиков прокторов и предполагает выборочную, а не полную перепроверку видеозаписей.3. Автоматический мониторинг
Мониторинг полностью проходит без участия человека. Его главное преимущество – низкая стоимость. Однако во многих ситуациях человеческое участие незаменимо, ведь даже самый совершенный ИИ может ошибаться.
Как работает прокторинг
Для студента процесс онлайн-прокторинга довольно прост и не вызывает стресса. К примеру, у нас в “Экзамус” (Examus) процесс устроен следующим образом:
Перед началом экзамена
Шаг 1. Система прокторинга запрашивает доступ к камере и микрофону.
Шаг 2. Решение удаленного прокторинга проверяет стабильность интернет-соединения.
Шаг 3. Система прокторинга проверяет наличие второго экрана и все попытки симулировать или имитировать экран.
Шаг 4. Процесс идентификации студента (если все вышеперечисленные требования выполнены), то есть тестируемый должен будет сфотографировать себя и представить его в систему вместе с документом, удостоверяющим личность (это могут быть водительские права, студенческий билет или кредитная карта).
Шаг 5. Начните экзамен и покажите свои знания!
Во время экзамена
Во время экзамена система онлайн-прокторинга анализирует поведение испытуемого. Если учащимся разрешено пользоваться калькуляторами или бумагой и ручкой в определенных ситуациях – правила системы могут быть соответствующим образом скорректированы. Как правило, системы онлайн-прокторинга отслеживают следующие параметры:
• аномалии в направлении взгляда;
• закрытие части лица;
• наличие других лиц в кадре;
• обнаружение человеческого голоса;
• обнаружение переключения монитора;
• обнаружение вторичных гаджетов;
• обнаружение книг и заметок;
• обнаружение калькулятора (если это не разрешено);
• обнаружение широковещательного ПО;
• обнаружение переключения вкладок в браузере;
• обнаружение сторонних алгоритмов;
• обнаружение невербальной коммуникации.
Решение автоматически помечает все подозрительные действия и добавляет их в отчет. Каждая запись в нем включает разбивку по типу нарушения и соответствующую метку времени.
После экзамена
Система прокторинга собирает и объединяет информацию из всех источников в единую комбинированную запись. После этого программа рассчитывает общую вероятность нарушений во время экзамена: зеленая зона означает низкую вероятность, желтая — среднюю, а красная – высокую. Основываясь на полученных результатах, система Examus способна:
• Показать записи с камеры, микрофона и рабочего стола;
• Показать все возможные нарушения в хронологическом порядке;
• Показать подробную информацию по каждому нарушению (с указанием типа и метки времени).
Как устроена система мониторинга
ИИ-проктор
Важная часть любой системы прокторинга – ИИ. Нейросетевые алгоритмы удаленного прокторинга (AI-proctor) анализируют и группируют данные из трех источников (видео, аудио и рабочий стол пользователя). Именно ИИ-проктор обнаруживает большую часть несанкционированных действий. Он анализирует как физическое (например, отвод взгляда от экрана, разговор или взаимодействие с посторонними лицами), так и цифровое поведение (активность совместного использования экрана, вторичные гаджеты).
Кому еще нужен прокторинг
Система прокторинга будет полезна школам и университетам – и не только при сдаче письменных экзаменов. На рынке уже появляются решения, которые позволяют эффективно контролировать поведение студентов во время устных экзаменов и других видов тестирования. Удобство прокторинга в том, что благодаря современным алгоритмам ИИ, отслеживающим поведение учащихся, с помощью такого мониторинга можно измерять уровень вовлеченности обучающихся не только во время контрольного тестирования, но и в течение всего периода обучения, а затем вносить необходимые коррективы в коммуникацию.
Кроме того, системы прокторинга будут эффективны для компаний, которые проводят регулярное обучение сотрудников и тестирование для повышения квалификации или приема на работу.
У прокторинга большое будущее и в других направлениях помимо обучения. HR — массовое тестирование сотрудников Уже сейчас в видеорегистраторы внедряют разработки, которые с помощью компьютерного зрения определяют, насколько внимательно водитель смотрит на дорогу. Такие решения позволяют значительно снизить риск ДТП. А бизнес, в свою очередь, может воспользоваться мониторингом на презентациях новых продуктов, исследуя уровень вовлеченности и интереса аудитории.