В нашем случае прокторинг — это наблюдение за процессом тестирования, потому что наблюдать за процессом заполнения личностного опросника смысла нет. Тесты в ST4 бывают разные, но в любом случае это последовательность вопросов с правильными и неправильными ответами. Многие компании всеми силами стремятся проверить, что в отведенное для теста время участник отвечает самостоятельно, никуда не подглядывает. Аргумент такой: в первую очередь от кандидата нужны знания и способности, а не хитрость и амбиции.
До COVID-19 человека можно было протестировать в ST4 прямо в ходе личного собеседования в офисе и понаблюдать за ним в процессе. Так делали немногие, но возможность была. Массовый переход в онлайн из-за эпидемии взволновал HR-ов, возник вопрос: как можно контролировать поведение кандидата, который проходит тест с ноутбука или смартфона из дома или откуда-то еще? Вдруг рядом с ним кто-то стоит и подсказывает ответы? Вдруг у него на столе шпаргалки?
Варианты удаленного прокторинга
Вариантов всего два: за человеком может наблюдать либо «бездушная машина», либо другой человек.
Автоматизированный прокторинг встречается, но не очень часто. Приведем пример максимально жесткого варианта: пользователю нельзя перемещаться между вкладками, нажимать Print Screen, переключаться на другие окна в системе. Любое из этих действий приводит к мгновенному прекращению тестирования. При желании и наличии ресурсов можно зайти дальше и использовать нейросети, которые обучены наблюдать за глазами и распознавать взгляды в сторону и прочее. Такие методы крайне ограничивают участника, создают массу ситуаций с ложными срабатываниями, которые сложно идентифицировать и подтвердить/опровергнуть. Любой может случайно забыть выключить всплывающие уведомления мессенджера или отвести взгляд от экрана, услышав звук в соседней квартире.
Некоторые системы тестирования требуют установки программы-клиента на компьютер пользователя, с помощью которой будет осуществляться слежка. Морально-этические и юридические аспекты подобного вторжения в частные владения (которыми является личный компьютер кандидата) — тема для отдельной статьи.
Получается, что успешность тестирования зависит от способности следовать процедурам и правилам больше, чем от способностей и знаний. При этом возможности мухлевать остаются (допустим, камера подключена к ноутбуку и смотрит на участника, а другой человек решает за него задачи за этим ноутбуком).
С наблюдателем-человеком (проктором) тоже не все так просто. Начнем с того, что он должен быть подготовлен. Чтобы отслеживать деятельность участника, ему придется беспрестанно смотреть на участника, сопоставлять движение мыши на экране участника с движением руки участника (что не всегда возможно) и иметь достаточно технических знаний, чтобы идентифицировать подключение/отключение дополнительных устройств, программ и прочего.
Представьте процедуру прохождения удаленного теста под контролем наблюдателя. Участника перед началом просят поднять ноутбук и показать комнату, показать, что на столе и под столом. Нет ли вокруг справочных материалов? Но углы обзора камеры сильно ограничены, ничто не мешает ассистенту позже подойти и начать подсказывать.
Наблюдатель может попросить не произносить вопросы вслух, но довольно жестоко лишать человека возможности проговаривать слова в момент стресса. А тестирование на время — это всегда стресс. Наблюдатель внимательно смотрит на экран заполняющего тест, но беспроводная мышь и монитор в соседней комнате, на который дублируется изображение, позволяют решать задачи теста хоть вдесятером.
Результат? Потрачено время проктора. Немного усложнилась жизнь тех, кто хочет мухлевать. Дополнительный стресс испытали честные участники. Насколько такой результат полезен работодателю?
Плюсы и минусы удаленного прокторинга
Плюсы прокторинга: перенос ответственности за корректность результатов с сотрудников компании на представителей той организации, которая поставляет специальные системы для прокторинга. HR-подразделениям легче «продать» руководству удаленное тестирование, пообещав (достаточно иллюзорный) контроль над кандидатами.
Минусов прокторинга много: кратное усложнение технической составляющей процесса, недовольство кандидатов, увеличение затрат организацию и техническую поддержку всего процесса.
Прокторинг негативно влияет на кандидатов и с точки зрения стресса, и с точки зрения имиджа компании. Компания ясно дает понять, что никому не доверяет, комфортно ли будет работать с таким менеджментом?
Заключение
На наш взгляд, прокторинг полезен, когда он может быть осуществлен с высокой степенью точности — очно. Удаленный прокторинг — усложнение процесса с крайне призрачными плюсами с точки зрения получения реальных результатов, а не подтасованных.
Используйте несколько последовательных инструментов отсева. Говорите участникам, что тестирование — это только часть процесса оценки, что результаты тестов будут проверены при очном прохождении (верификационные тесты можно дать в ходе собеседования). Посмотреть, как человек может делать простые вычисления или понимать речь, помогают классические тесты способностей.
