Прокторинг: что это такое и как он может помочь компании

В настоящий момент организации все чаще обращаются к он лайн обучению. Контроль за качество выполнения заданий является сложной задачей. Екатерина Ивлева в статье о прокторинге объясняет,  как создать систему отслеживания действий сотрудников в момент обучения, что поможет оценть знания с большей точностью.

Популярное по теме

90 чек-листов по всем направлениям для HR и бизнес-тренеров: подборка от экспертов hrtime.ru

Полезные инструменты по подбору, оценке персонала, обучению, консалтингу, разработке СОТ, корпоративной культуре, коучингу, кадровому учету и карьерному консультированию в одном месте.

Посмотреть подборку

Что такое прокторинг?

Дистанционное обучение становится всё популярнее — и все острее встает вопрос объективной оценки учащихся. Ведь чем дальше от глаз экзаменатора, тем больше возможностей скрыть своё незнание. Пока что с этой проблемой лучше всего справляется прокторинг — инструмент контроля, способный, при правильном использовании, сэкономить компаниям тысячи долларов.

Прокторинг — система, позволяющая следить за тестированием или экзаменом в онлайн-режиме.
Прокторинг дает возможность верифицировать (подтвердить) личность тестируемого, а также наблюдать за его поведением и происходящим на его экране компьютера, чтобы убедиться, что он не списывает, не прибегает к помощи других людей, не ищет ответы в интернете.

Изначально прокторинг начали применять в 2008 году в США, чтобы дистанционно контролировать сдачу экзаменов. Создатель этой технологии — компания ProctorU, сегодня помогающая администрировать около 2 000 000 000 экзаменов в год. Услугами этого прокторинг-провайдера пользуются более 1 000 учебных заведений в 129 странах.

Со временем прокторинг стали использовать не только в обучении, но и для решения других проблем. Например — кадровых.

Как работает система

Для использования системы прокторинга нужны веб-камеры, компьютеры с устойчивым интернет-соединением и простая программа для записи с экрана компьютера.

Представьте, что специалисту нужно сдать онлайн-экзамен в учебном центре на другом конце страны. Для этого ему понадобится в назначенное время включить свой компьютер и залогиниться в системе дистанционного обучения. Затем он должен включить веб-камеру, дать разрешение на ведение записи с экрана своего компьютера проктору (администратору-наблюдателю) и ждать верификации. Если с документами и доступами все в порядке, проктор запускает экзамен. В ходе экзамена запрещено искать ответы в интернете, пользоваться чьими-либо подсказками и шпаргалками, выходить из поля зрения веб-камеры. Если экзаменуемый нарушает правила поведения, то проктор может вынести ему предупреждение, досрочно завершить экзамен или аннулировать его результаты.

Для групповых тестирований или экзаменов используют большее количество прокторов, запись экранов компьютеров, а также записи поведения аудитории камерами наблюдения.

Существует 3 версии системы прокторинга:

1. Проктор — человек. За тестируемым наблюдает живой человек через монитор: всё контролирует и принимает решение о зачете экзамена. Выполненные задания проверяют отдельно.

2. Проктор — компьютер. Специальная программа, распознающае «нежелательные» действия тестируемых. Качество распознавания постоянно совершенствуется. Сейчас такие системы способны отслеживать и анализировать направление взгляда, стиль стука по клавиатуре, манеру разговора, и т.п. Итоги тестирования подводит компьютер без человеческого вмешательства.

3. Человек и компьютер. В этом случае всё контролирует программа, а человек проверяет результаты ее работы. Если тестируемый ведет себя подозрительно, программа выдаст предупреждение, все запишет и сообщит об этом проктору. Процесс контроля проходит либо в онлайне — 1 проктор может одновременно администрировать 6 тестируемых, — либо проверяющий смотрит видеозаписи, на основании которых выносит решение.

Каждая версия системы прокторинга появилась на основе требований пользователей и прошла проверку «боем».

Зачем прокторинг бизнесу?

Рассмотрим 3 основные сферы применения:

1. Найм (подбор) персонала. HR-менеджеры могут предложить соискателям, находящимся в других городах и странах, пройти тесты с использованием прокторинга. Если результаты подтверждают их профессиональный уровень — продолжают работу с кандидатами. Если нет — экономят время и сразу приступают к поиску подходящих специалистов.

2. Обучение. Особенно актуально для предприятий, у которых есть корпоративные университеты или офисы, расположенные в разных регионах. В этом случае повышение квалификации работников проводят онлайн, а прохождение экзаменов контролируют прокторингом.
   
   В качестве примера можно привести корпоративный университет Сбербанка и его программу Мини-МВА. В этой программе линейные руководители проходят обучение в очное и онлайн-обучение, а также занимаются проектной работой. Экзамены по всем дисциплинам проходят дистанционно, с прокторингом. По результатам обучения в среднем 30% выпускников программы получают повышение или горизонтальное перемещение.

3. Проверка навыков, тестирование, сертификация. В этом случае прокторинг дает возможность компаниям застраховаться от: 1) подсказок заинтересованных экзаменаторов, 2) списывания, 3) фальсификации результатов тестирования.
   
   Необходимость в тестировании не всегда связана с обучением. По его результатам принимают решения о ротациях в штате, формировании кадрового резерва и даже о ежегодных надбавках. Поэтому некоторые работники могут хитрить, чтобы приукрасить результаты тестов. Прокторинг призван защитить от таких манипуляций.
   
   Другая ситуация — сертификация сотрудников авторитетными профессиональными организациями. Так, хотя Институт Профессиональных Финансовых Менеджеров (IPFM) и делегирует аккредитованным партнерам право принимать экзамены IPFM дистанционно, но делать это нужно с обязательным использованием прокторинга. Таким образом IPFM поддерживает высокий статус выданных им дипломов. Подобную практику внедряют и отечественные компании, среди которых — Яндекс.

Пример: сертификация с прокторингом от Яндекса

В сентябре 2018 года Яндекс запустил бета-версию нового вида сертификации в Директе — экзамен с прокторингом. Такое тестирование проходит с дополнительной авторизацией. За ходом сдачи теста ведется видеонаблюдение.

С июля 2019 года сертификат по Яндекс.Директу можно будет получить только с прокторингом, поисковик хочет гарантировать достоверность знаний сертифицированного специалиста.

На официальных ресурсах компании не уточняется, кто разработчик используемой системы прокторинга. Сказано, что данные обрабатываются «в автоматическом режиме с помощью алгоритмов машинного обучения». Решение о результатах сертификации тоже принимает машина. Специалисты Яндекса вмешиваются только в крайних случаях — если тестируемый не согласен с итогами проверки и желает их оспорить.

Возможно Yandex разработал свою систему, однако чаще всего даже крупные компании заказывают соответствующие услуги у прокторинг-провайдеров, используя готовые программные решения. Упомянутый выше Сбербанк в программах своего корпоративного университета контролирует прохождение экзаменов с помощью системы прокторинга Examus.

Другие компании обращаются к специализированным сервисам. Например, если нужно проверить с прокторингом профессиональные навыки (hard skills) бухгалтеров и финансовых специалистов, используют функционал и возможности digital-платформы Finassessment. Такое сотрудничество позволяет компаниям сэкономить тысячи долларов. Вот 2 примера.

Кейс #1. Проверка с прокторингом 12 главных бухгалтеров: где слабое звено?

Тут прокторинг сработал на уровне сдерживающего фактора — списывать нельзя. Всем пришлось полагаться на те знания, которыми они реально обладали. Это позволило получить максимально объективную оценку hard skills бухгалтеров. В итоге: нашли и устранили главные источники проблем; организовали дополнительное обучение именно тех, кто в нем нуждался.

Таким образом, этот пример показывает, что прокторинг эффективен при кадровых перестановках. Но не только. Он поможет грамотно провести оптимизацию штата. Об этом — в следующем кейсе.

Кейс #2. Проверка с прокторингом отдела казначейства: кого уволить, а кого оставить?

А если бы оценивали без прокторинга? Как минимум 6 сотрудников, пойманных на списывании, могли бы исказить данные о своей профпригодности. А это 10% (!) от общего количества участников. Как думаете, насколько пострадала бы достоверность такой оценки? И каким оказалось бы качество кадровых решений, принятых по итогам неконтролируемого тестирования?...

Прокторинг и бизнес

Говоря о практике внедрения прокторинга в бизнес-процессы, можно констатировать следующее:

1. Примеры Яндекса и IPFM показывают, что крупные игроки чаще других применяют прокторинг, желая обеспечить максимальную достоверность результатов сертификации тысяч географически «разбросанных» студентов. Это справедливо применительно к Сбербанку и другим корпорациям, которые вкладывают большие средства в программы корпоративных университетов, поэтому на выходе хотят получить выпускников, которые бы обладали реальными знаниями, а не просто «прослушали курс».

2. Отдельные специалисты сталкиваются с прокторингом в ходе сдачи экзаменов на международные дипломы и сертификаты, что позволяет им и организаторам экзаменов экономить время и средства на проведении таких мероприятий и сосредоточиться на качестве.

3. Популярность дистанционного обучения только растет. Компании, испытывающие кадровый голод, запускают собственные корпоративные университеты, большинство из которых — дистанционные. Роль прокторинга в скором времени возрастет, поскольку этот инструмент позволяет контролировать качество дистанционного обучения.

4. Зачастую прокторинг целесообразно брать на вооружение для усиления hard skills специалистов компании, организации обучения и прочей работы с персоналом, даже если тестируемых не слишком много. Кейсы от Finassessment демонстрируют, что это могут быть ситуации, связанные с кадровыми перестановками и оптимизацией штата — в подобных случаях прокторинг помогает принимать взвешенные управленческие решения и экономить финансовые ресурсы.

Однако на данный момент нельзя сказать, что бизнес в полной мере использует потенциал этого инструмента. Остается надеяться, что в ближайшее время появятся новые кейсы об эффективном применении онлайн-прокторинга при решении насущных предпринимательских проблем.

http://www.hr-journal.ru/articles/op/proctoring.html
03.06.2019