Как составить тест для сотрудников: вопросы, которые работают

Самая частая причина массовых провалов — вопрос о том, чего в материале нет. Эксперт пишет вопросы «из головы», опираясь на собственный опыт, и незаметно выходит за пределы курса. Для сотрудника это выглядит как несправедливая проверка, и результат он воспринимает не как сигнал к обучению, а как придирку.

Практическая защита — писать вопросы сразу после каждого урока, а не в конце работы над курсом. Тогда каждый вопрос физически привязан к абзацу, из которого следует ответ. Если такого абзаца нет — вопрос удаляется или в урок добавляется недостающее.

Формулировка отвечает за то, что именно измеряет вопрос. Плохо составленный вопрос измеряет внимательность к языку, а не знание предмета — сотрудник, который знает материал, ошибается из-за двусмысленности.

Отдельно про слова-маркеры. Формулировки со словами «всегда», «никогда», «обязательно» в вариантах ответа почти всегда неверны, и опытные испытуемые вычисляют это без знания предмета. Такой вопрос измеряет насмотренность на тесты, а не компетентность.

Неверные варианты (дистракторы) — это половина работы над вопросом. Если сотрудник отбрасывает три из четырёх вариантов, не зная темы, вопрос не проверяет знание. Правдоподобный дистрактор строится не из фантазии, а из реальных ошибок сотрудников: то, что люди путают на практике, и должно стоять в вариантах.

После того как тест прошли хотя бы десять человек, качество каждого вопроса можно измерить, а не оценивать на глаз. Основных показателей три, и все они читаются без специальной подготовки.

Различительная способность считается просто: берут группу с лучшими результатами теста и группу с худшими и сравнивают, как часто каждая отвечала верно на конкретный вопрос. Если разница велика — вопрос различает уровни знания. Если разницы нет — вопрос бесполезен независимо от того, насколько он важен по мнению эксперта.

Порог сдачи назначается не «по традиции», а от цены ошибки в работе. Там, где ошибка стоит здоровья гостя, требование должно быть жёстким; там, где речь о желательном знании, — мягким.

Повторные попытки нужны почти всегда: цель проверки — довести сотрудника до нужного уровня, а не отсеять его. Разумная схема — две-три попытки, между которыми сотрудник обязан вернуться к материалу. Важно, чтобы исчерпание попыток не приводило к автоматической сдаче: тогда тест перестаёт быть проверкой и превращается в формальность.

Тест на телефоне неизбежно допускает подглядывание в материал. Полностью исключить это нельзя, но можно снизить смысл списывания: ограничить время на вопрос, перемешивать порядок вопросов и вариантов, отслеживать уходы с экрана теста и временно блокировать попытку при систематических выходах. Более надёжный путь — сочетать тест с практическим заданием и наблюдением в смене, где списать невозможно.

Результаты теста читаются в двух направлениях: по людям и по вопросам. Первое направление — управленческое, второе — методическое, и его обычно игнорируют.

Регулярный пересмотр теста по этим сигналам постепенно превращает набор случайных вопросов в инструмент, которому можно доверять. Общая методика построения курса, частью которого является тест, разобрана в статье про создание корпоративного курса.