Diseño de Evaluaciones

Cómo establecer el punto de corte para una evaluación de codificación

ClarityHire Team(Editorial)8 min read

La forma equivocada: "vamos con el 70%"

La mayoría de los equipos elige una puntuación de aprobación votando en la sala. "¿Qué os parece? ¿70? Digamos 75." El número se apunta, la evaluación se pone en marcha y se revisa solo cuando el embudo sufre — bien porque muy pocos candidatos superan el umbral y el puesto se queda abierto, o bien porque demasiados lo superan y la ronda de entrevistas se colapsa.

Un punto de corte no es una corazonada. Es la decisión individual más importante en tu embudo de contratación: cada punto que lo muevas cambia quién avanza a la siguiente fase. Merece un método.

Qué representa realmente un punto de corte

Formalmente, un punto de corte es el umbral que separa a un candidato mínimamente cualificado (CMC) — el nivel de competencia más bajo que aún contratarías — de alguien a quien no avanzarías. Todo lo demás se deduce de esa única definición.

Dos confusiones comunes:

  • Un punto de corte no es la puntuación esperada de una contratación típica. Es el suelo. La mayoría de tus nuevas contrataciones deberían superarlo con comodidad.
  • Un punto de corte no es una medida de la dificultad de la prueba. Dos evaluaciones con dificultades muy distintas pueden tener el mismo CMC y, por tanto, puntos de corte muy diferentes.

Paso 1: Escribe el CMC

Antes de tocar el número, escribe una descripción de un párrafo del candidato mínimamente cualificado para este rol en esta evaluación. Sé específico:

"Un ingeniero backend con 2-3 años de experiencia en producción que puede implementar un endpoint CRUD con validación de entrada, escribir una prueba para el caso feliz y manejar un caso límite sin orientación. Puede fallar uno de los tres casos límite secundarios. Produce código legible pero no siempre elegante."

Si no puedes escribir este párrafo, no estás listo para fijar un punto de corte. Haz una sesión de calibración con el equipo de contratación hasta que puedas.

Paso 2: Elige un método

Tres métodos que usan los profesionales, en orden creciente de rigor:

Estimación al estilo Angoff

Un panel de 3-5 ingenieros familiarizados con el rol realiza la evaluación, luego revisa cada pregunta y estima la probabilidad de que un CMC la responda correctamente. Suma esas probabilidades y tienes un punto de corte preliminar. Crudo pero defendible — y mucho mejor que nada.

Método del grupo fronterizo

Identifica 10-20 candidatos anteriores sobre los que el equipo estuvo de acuerdo en que estaban "al límite" — podría haber ido en cualquier dirección. Mira sus puntuaciones reales. La mediana de ese grupo es tu punto de corte preliminar. Requiere datos históricos pero usa evidencia real en lugar de conjeturas del revisor.

Método de grupos contrastantes

Extrae dos conjuntos de candidatos anteriores: los que recibieron oferta y tuvieron buen desempeño en sus primeros seis meses, y los que recibieron oferta pero no rindieron bien (o fueron rechazados en la siguiente ronda). Encuentra la puntuación que mejor separa las dos distribuciones. El método más fuerte cuando tienes los datos, el más débil cuando no.

La mayoría de los equipos deberían empezar con Angoff para la primera versión de una nueva evaluación y migrar al método del grupo fronterizo o grupos contrastantes según se acumulan datos.

Paso 3: Calibra contra tu cantera real

Una vez que tengas un punto de corte preliminar, pruébalo contra tus últimas 50-100 evaluaciones completadas y calcula tres números:

  • Tasa de aprobación. ¿Qué fracción de todos los envíos supera el umbral?
  • Tasa de aprobación del cuartil superior. De los candidatos a los que obviamente entrevistarías, ¿cuántos lo superan?
  • Tasa de aprobación del cuartil inferior. De los candidatos que obviamente rechazarías, ¿cuántos lo superan?

Dos modos de fallo a buscar:

  1. Tasa de aprobación del cuartil superior por debajo del 90% — tu punto de corte es demasiado alto; estás rechazando gente que quieres.
  2. Tasa de aprobación del cuartil inferior por encima del 10% — tu punto de corte es demasiado bajo; estás dejando pasar gente que no quieres entrevistar.

Si ambos números se ven bien, lanza el punto de corte. Si alguno se desvía, el movimiento correcto normalmente no es deslizar el corte hacia arriba o abajo un 5% — es mirar qué preguntas están haciendo una clasificación errónea. A menudo una o dos preguntas mal calibradas son responsables, y arreglándolas es mejor que reajustar el umbral.

Paso 4: Ajusta por la fuente, no por el rol

Una evaluación senior extraída de una cantera de referencias cuidadosamente seleccionada tiene una distribución de puntuaciones fundamentalmente distinta que la misma evaluación con una cantera de captación abierta. Mismo rol, mismas preguntas, entradas diferentes.

La forma más limpia de manejar esto:

  • Mantén el punto de corte vinculado a la evaluación, no al canal.
  • Registra la tasa de aprobación por fuente por separado en tu análisis de contratación.
  • Usa las tasas de aprobación por fuente para decidir dónde invertir esfuerzo de captación, no para flexibilizar el umbral para un canal.

Los equipos que bajan silenciosamente el corte para fuentes "buenas" terminan con dos problemas no relacionados: su umbral se desplaza de formas que nadie puede articular, y sus mejores fuentes dejan de verse tan bien una vez que la comparación ya no es de manzanas a manzanas.

Paso 5: Vigila el lado de los falsos negativos

La mayoría de conversaciones sobre el punto de corte se enfoca en falsos positivos — candidatos que aprobaron pero no deberían haberlo hecho. Los falsos negativos — candidatos fuertes rechazados por un umbral demasiado alto — son invisibles por definición. Nunca ves lo que hubieran hecho en la entrevista.

Tres proxies para el riesgo de falsos negativos:

  • Desacuerdo del revisor fronterizo. Si dos revisores califican el mismo envío y están en desacuerdo en más de un punto en la rúbrica, pequeñas diferencias de corte pueden estar cambiando el resultado por ruido.
  • Valores atípicos de tiempo en la tarea. Un candidato que puntuó justo por debajo del corte en el 25% del tiempo asignado es una señal diferente a uno que puntuó justo por debajo en el 100% del tiempo. El primero es a menudo un casi-acierto, el segundo a menudo un verdadero rechazo.
  • Acuerdo en re-prueba. Para una muestra de rechazos fronterizos, ofrece un ejercicio de seguimiento breve. Si la mayoría aprueba, el corte es demasiado alto o la evaluación demasiado ruidosa.

Paso 6: Re-puntúa cada trimestre

Un punto de corte que era correcto en enero es improbable que lo sea en junio. Tres causas de desplazamiento:

  • La evaluación envejece. Las preguntas se filtran hacia repositorios al estilo LeetCode y datos de entrenamiento de IA. Las puntuaciones suben no porque los candidatos mejoraran, sino porque la prueba se hizo más fácil.
  • La cantera de candidatos se desplaza. Los despidos, cambios de mercado y patrones estacionales todos mueven la distribución.
  • La asistencia de IA se normaliza. Conforme los candidatos se vuelven mejores usando LLMs, lo que solía ser una puntuación del percentil 70 se convierte en una del percentil 40.

Re-ejecuta la calibración cada trimestre en los 50-100 envíos más recientes y ajusta. Documenta el cambio y la razón — el futuro tú necesitarás el rastro de auditoría.

Qué ClarityHire pone de relieve

El panel de análisis de contratación muestra la distribución de puntuaciones para cada evaluación junto con tasas de aprobación por pregunta y tiempo por pregunta, que es lo que necesitas tanto para la calibración inicial como para la re-puntuación trimestral. Las tasas de aprobación pueden dividirse por fuente, rol y ventana de tiempo para que puedas detectar desplazamiento antes de que se muestre en el embudo. Para equipos que ejecutan rúbricas de codificación calificadas por IA, el desglose por dimensión de rúbrica te dice si un candidato fronterizo lo es en corrección, calidad del código o pruebas — tres decisiones diferentes, a menudo confundidas bajo una única puntuación.

Qué hacer después

Elige la única evaluación que usas más a menudo y ejecuta la auditoría de cuatro pasos esta semana:

  1. Escribe el párrafo CMC para esa evaluación. Si el equipo está en desacuerdo sobre la redacción, pausa y reconcilia antes de hacer cualquier otra cosa.
  2. Calcula las tasas de aprobación del cuartil superior e inferior contra tu corte actual.
  3. Identifica las dos o tres preguntas que hacen más trabajo de clasificación errónea.
  4. Elige un método — Angoff si estás empezando desde cero, grupos contrastantes si tienes un año de datos de resultado — y produce un punto de corte defendible, por escrito, con la evidencia de calibración adjunta.

El punto de corte es el lugar donde la medición se convierte en decisión. Trátalo como cualquier otra parte importante de infraestructura: documentado, probado y revisado en un calendario.

evaluación de codificaciónpunto de cortediseño de evaluacionesmétricas de contratación

Artículos relacionados