Прокторинг при найме: что это, как работает и как читать результаты

Онлайн-тест долго был удобным способом проверить знания кандидата до собеседования. Сейчас у каждого кандидата в соседней вкладке открыт ChatGPT, и тест без контроля проверяет скорее умение быстро копировать, чем знания. Отсюда и интерес к прокторингу: он возвращает онлайн-тестированию смысл.

На наших данных это хорошо видно. Медианный балл на тестах с прокторингом в Talense составляет 60 из 100, ровно столько же, сколько при тестировании офлайн, в аудитории. То есть с контролем кандидаты показывают свой реальный уровень, а не уровень нейросети.

Ниже разберём, как устроен прокторинг при найме, что он отслеживает, как читать его результаты и как предупредить кандидата, чтобы не отпугнуть сильных людей.

Что такое прокторинг простыми словами

Прокторинг означает контроль за тем, как человек проходит онлайн-тест или экзамен. Он заменяет наблюдателя в аудитории: следит, чтобы кандидат проходил тест сам и не пользовался посторонней помощью.

Изначально прокторинг появился в образовании, для дистанционных экзаменов. При найме он решает ту же задачу, но с одним важным отличием.

Чем прокторинг при найме отличается от экзамена

На экзамене у студента нет выбора: сдавать его придётся в любом случае. У кандидата выбор есть. Если тестирование покажется ему неудобным или слишком строгим, сильный специалист вполне может выбрать компанию, где отбор устроен проще.

Поэтому при найме важен баланс. Контроль должен быть достаточным, чтобы результатам можно было доверять, и при этом понятным и необидным для честного кандидата. Ниже ещё вернёмся к тому, как этого добиться.

Виды прокторинга

Живой прокторинг иногда используют на финальных экзаменах или аттестациях. При найме почти всегда выбирают автоматический: он не требует согласовывать время и выдерживает большой поток, например набор на стажировку.

Что отслеживает автоматический прокторинг

Система использует три источника: камеру, микрофон и экран компьютера кандидата. По ним она замечает признаки посторонней помощи: например, что в кадре появился другой человек, рядом звучит чужая речь или кандидат переключается на другие окна во время теста.

В тестах Talense прокторинг отслеживает аудио, видео и экран. По каждому кандидату видно, какие нарушения и сколько раз сработали, а также общий уровень доверия к прохождению. Это позволяет быстро понять, к чьим результатам стоит присмотреться.

Онлайн и офлайн: не всегда нужен полный контроль

Полный прокторинг с камерой и микрофоном нужен, когда кандидат проходит тест дома и вы не видите, что происходит вокруг.

Но бывает и офлайн-формат: кандидаты приходят в офис или на площадку и проходят тест на компьютерах в аудитории, как часто делают при наборе на стажировки. Там за обстановкой и так следят люди, поэтому камеру и микрофон можно отключить и оставить только контроль переключения между вкладками. Кандидатам так спокойнее, а главное, что может испортить результат в аудитории, всё равно под контролем.

Как читать результаты прокторинга

Главное правило: нарушение ещё не значит, что человек списал. Система фиксирует события, а не намерения. Кандидат мог покашлять, кто-то мог заглянуть в комнату, а человек мог по привычке читать вопрос вслух. Единичные срабатывания встречаются почти у всех и сами по себе ни о чём не говорят.

Смотреть стоит на сочетание балла и нарушений:

• Высокий балл и много нарушений. Это повод присмотреться внимательнее. Пригласите кандидата на собеседование и попросите объяснить решения нескольких задач из теста. Тот, кто решал сам, легко это сделает.
• Высокий балл и почти нет нарушений. Можно доверять результату и двигаться дальше.
• Низкий балл и нарушения. Обычно разбираться не нужно, кандидат и так не проходит по результату.
• Низкий балл без нарушений. Это честный результат, который показывает реальный уровень.

И не стоит отказывать автоматически по числу нарушений. Порог лучше использовать как сигнал «проверить на собеседовании», а не как приговор. Так вы не потеряете сильного кандидата из-за кашля или шумных соседей.

Пример: тест для стажёров-разработчиков

Допустим, на стажировку пришло четыреста заявок, и первым этапом идёт онлайн-тест на 40 минут: вопросы по SQL, основам языка и пара коротких задач на код. Тест проходит дома, поэтому включён полный прокторинг: камера, микрофон и экран.

После теста рекрутер сортирует кандидатов по баллу. У большинства из верхней части списка нарушений нет или одно-два срабатывания, их сразу зовут на следующий этап. У нескольких человек высокий балл и заметно больше нарушений, их тоже зовут, но на собеседовании первым делом просят разобрать две-три задачи из теста. Кто решал сам, рассказывает спокойно и подробно. Остальных это быстро отсеивает.

Финальный этап отбора проходит в офисе, и там тест уже без камеры и микрофона, только с контролем вкладок. Кандидатам комфортнее, а результаты остаются сравнимыми.

Как предупредить кандидата

Скрывать прокторинг нельзя и не нужно. Кандидат должен заранее знать, что тест проходит под контролем, что именно отслеживается и что ему понадобится. Это честно, и, кроме того, само предупреждение уже снижает желание искать обходные пути.

В приглашении на тест стоит указать:

• что тест проходит с прокторингом и отслеживаются камера, микрофон и экран;
• что нужен компьютер с камерой и микрофоном, а с телефона тест пройти не получится;
• что лучше выбрать тихое место, где никто не помешает;
• сколько длится тест и можно ли сделать перерыв.

Пример текста:

Следующий этап: онлайн-тест на профессиональные навыки, около 40 минут. Тест проходит с прокторингом: во время прохождения отслеживаются камера, микрофон и экран, поэтому понадобится компьютер с камерой и микрофоном и тихое место. Пожалуйста, не переключайтесь на другие вкладки и не пользуйтесь посторонней помощью: так мы увидим ваш реальный уровень и сможем честно сравнить всех кандидатов.

Не забудьте и про согласие на обработку персональных данных: кандидат должен дать его до начала теста.

Когда прокторинг нужен, а когда нет

Прокторинг нужен там, где у задания есть правильный ответ и его легко найти или сгенерировать: тесты на знание языка программирования, SQL, теоретические вопросы, короткие задачи на код.

В видеоинтервью строгий контроль обычно не требуется. Кандидат отвечает на камеру своими словами, и оценивается содержание ответа, его трудно подменить чужим текстом. Как устроить такой этап, мы рассказали в инструкции по асинхронному видеоинтервью.

Для больших практических заданий, которые кандидат делает несколько дней, прокторинг не подходит в принципе. Там работает другой подход: задание, у которого нет единственного правильного решения, и оценка принятых решений, а не совпадения с ответом. Почему для разработчиков это сейчас лучший формат, мы разобрали в статье «Тестовое задание или алгоритмические задачи».

Прокторинг не заменяет хорошее задание

Даже идеальный контроль не спасёт тест, вопросы которого не связаны с работой. Если тест проверяет заучивание определений, прокторинг лишь гарантирует, что кандидат честно их не помнит. Сначала стоит убедиться, что вопросы проверяют то, что действительно нужно в работе, и только потом думать о контроле. Как собрать такой тест, мы рассказали в статье «Тестирование кандидатов при приёме на работу».

Лучше всего прокторинг работает в связке: тест с прокторингом отсеивает тех, у кого нет базовых знаний, а собеседование или практическое задание проверяет, как человек применяет их на деле.

Частые ошибки

Не предупреждать кандидатов. Человек, который узнал о контроле в последний момент, нервничает и проходит тест хуже своего уровня, а кто-то и вовсе отказывается.

Отказывать автоматически по числу нарушений. Это прямой путь потерять сильных кандидатов из-за случайных срабатываний.

Не давать проверить технику заранее. Если камера или микрофон не работают, кандидат тратит время теста на настройку и получает заниженный результат.

Включать полный прокторинг там, где он не нужен. В офлайн-аудитории достаточно контроля вкладок, а в видеоинтервью контроль обычно лишний.

Частые вопросы

Что такое прокторинг при найме?

Это контроль онлайн-тестирования кандидатов: система через камеру, микрофон и экран следит, чтобы кандидат проходил тест самостоятельно, и фиксирует нарушения. Так результатам онлайн-теста можно доверять так же, как тестированию в офисе.

Как работает автоматический прокторинг?

Во время теста система анализирует данные с камеры, микрофона и экрана кандидата и отмечает подозрительные события, например постороннюю речь или переключение на другие окна. Рекрутер видит, какие нарушения и сколько раз сработали у каждого кандидата.

Можно ли пройти тест с прокторингом с телефона?

Обычно нет. Для теста с прокторингом нужен компьютер с камерой и микрофоном.

Значит ли нарушение, что кандидат списывал?

Нет. Система фиксирует события, а не намерения: кашель, шум или человек в кадре тоже могут вызвать срабатывание. Стоит смотреть на сочетание балла и нарушений и при сомнениях уточнять на собеседовании.

Нужен ли прокторинг, если кандидаты проходят тест в офисе?

Полный не нужен. В офлайн-формате камеру и микрофон можно отключить и оставить только контроль переключения вкладок.