Criteria Corp vs SHL: когнитивные тесты сравнены

Краткая версия

Criteria Corp и SHL — два наиболее упоминаемых поставщика, когда компании ищут решения для тестирования когнитивных способностей. Оба имеют десятилетия исследований валидности, оба одобрены корпоративными закупщиками и большинством регуляторов, и оба публикуют технические руководства, которые можно действительно прочитать.

Отличия касаются философии разработки теста, опыта кандидата и общего контекста продукта, который каждый поставщик создает вокруг когнитивного теста. В этой статье мы напрямую сравниваем предложения по когнитивным тестам и показываем, где платформа вроде ClarityHire — которая не предоставляет собственный тест когнитивных способностей — встраивается в общий процесс найма.

Флагманские тесты

Criteria Cognitive Aptitude Test (CCAT). 50 вопросов за 15 минут. Смешанные вербальные, математические, пространственные и логические задания. Единый комплексный балл плюс субиндексы. Адаптивный банк заданий, чтобы ограничить списывание при повторных попытках.

SHL Verify Interactive G+. Адаптивный тест когнитивных способностей, около 24 минут. Вербальное, числовое и индуктивное рассуждение объединены в общий балл умственных способностей (g). Адаптация на основе теории ответа на задание (IRT), которая корректирует сложность в реальном времени.

Оба теста дают g-нагруженный результат, который коррелирует с производительностью на работе примерно на одинаковом уровне — коэффициенты валидности 0,50–0,65 относительно оценок руководителей, что соответствует известным метаанализам по когнитивным тестам способностей.

Философия разработки

Вот где они расходятся:

CCAT: отведено время и ориентирован на охват. Все кандидаты получают одну форму из 50 заданий (с произвольной выборкой из большого банка). 15 минут — короткий срок; скорость входит в конструкт теста. Экзаменующие видят процентильный ранг относительно норм-групп для конкретной должности.

Verify: адаптивен и ориентирован на глубину. Тест усложняется при правильных ответах кандидата и упрощается при ошибках. Меньше заданий, но более эффективное измерение способностей по всему спектру. Менее подвержен случайному угадыванию.

Для массового найма (например, час рабочих) фиксированная форма CCAT с 15-минутным временем проще в операционном плане. Для найма специалистов, где нужно различить сильных кандидатов, адаптивные тесты вроде Verify Interactive дают больше дифференцирующей информации на верхнем конце распределения.

Типы заданий

• CCAT. Преимущественно текстовые вопросы с выбором ответа. Вербальные аналогии, текстовые математические задачи, логические головоломки, простое пространственное мышление.
• SHL Verify. Мультимедиа. Числовые задания содержат встроенные таблицы и графики. Индуктивное рассуждение проверяет через визуальные закономерности. Вербальные задания включают отрывки, более приближенные к рабочему чтению.

Задания SHL больше похожи на реальную работу для большинства должностей специалистов. Задания CCAT больше похожи на традиционный тест способностей. Важно ли это для вас, зависит от того, считают ли ваши менеджеры по найму «офисоподобные» материалы стимулов более убедительными с точки зрения внешней валидности.

Защита от списывания

Оба поставщика подходят к проблеме предотвращения списывания по-разному:

• CCAT использует большой банк заданий с произвольным распределением плюс отдельную форму «Verify», которая проводится в режиме реального времени для подтверждения результатов при необычном результате без надзора.
• SHL Verify адаптивен (поэтому никакие два теста не идентичны) и предлагает опциональный контролируемый повторный тест «Verify-Plus» для подтверждения.

На практике оба поставщика по-прежнему рекомендуют повторное тестирование в процессе или живое интервью перед принятием решения по найму только на основе когнитивного балла — особенно для старших должностей, где кандидат имеет больше мотивации делегировать тест кому-то другому.

Опыт кандидата

• CCAT мало нравится кандидатам из-за нехватки времени. Лимит в 15 минут на 50 заданий суровый, и тест часто используется как одноразовое испытание «принято/отклонено», что еще больше портит впечатление.
• SHL Verify обычно получает более позитивные отзывы. Адаптивность означает, что слабые кандидаты тратят меньше времени на невыполнимые задания, и тест обычно занимает 18–24 минуты, а не жесткие 15 минут.

Ни один из тестов не приносит радости. Для позитивного впечатления (по меркам Glassdoor) когнитивный тест должен быть одним из этапов среди нескольких, с четким объяснением того, почему вы его используете.

Цена и комплектация

Оба ориентированы на средний бизнес и enterprise. Ни один не публикует цены открыто.

• Criteria Corp предлагает годовые пакеты подписки с включенным использованием тестов. Небольшие компании могут начать примерно с $5–10k в год; цены для enterprise масштабируются по количеству найма или тестов.
• SHL это enterprise-решение с индивидуальными контрактами. Внедрение обычно требует поддержки консультанта SHL. Полная стоимость владения обычно выше, чем у Criteria.

Для 50-человечной команды инженеров, проводящей когнитивные тесты для каждого предложения, Criteria — более доступная отправная точка. Для 5000-человечной корпорации, интегрирующей когнитивные тесты по разным отделам, более широкий каталог SHL и модель консалтинга часто выигрывают на конкурсе.

Как ClarityHire встраивается в оба решения

ClarityHire не конкурирует с Criteria или SHL по когнитивному тестированию — мы не поставляем собственный тест когнитивных способностей. ClarityHire сосредоточена на технических оценках, живом кодировании, поведенческих интервью со скорингом и слое целостности, который дополняет оба.

Типовая конфигурация, которую мы видим в командах клиентов:

1. CCAT или SHL Verify для когнитивного скрининга (один или другой, но не оба)
2. Техническая оценка ClarityHire для проверки должностных навыков
3. Живое кодирование + поведенческое интервью ClarityHire для более глубоких раундов
4. Комбинированный скоринг в едином скоркарде

Когнитивные способности — один из самых предсказывающих единичных индикаторов, который можно измерить. Но это не единственный показатель, и он не скажет вам, может ли кандидат реально выполнять работу. Комбинация дает лучших нанятых, чем каждый компонент отдельно.

Как выбрать

• Выбирайте Criteria Corp, если: найм в большом объеме, бюджет среднего уровня, нужен простой когнитивный тест с фиксированной формой, не требуется оценка личности или поведения в одной системе.
• Выбирайте SHL, если: масштаб enterprise, развертывание по нескольким направлениям, нужно адаптивное тестирование и более широкий спектр поведенческой оценки, есть бюджет на консалтинг при внедрении.
• Используйте ClarityHire в дополнение к любому из них, если: нанимаете инженеров, менеджеров продуктов или должности, где должностная оценка навыков плюс живое кодирование/интервью дает информацию, которую один когнитивный тест не даст.

См. также: наше сравнение с фокусом на валидность и наш анализ цены и ROI.