Diseño de evaluaciones

Evaluaciones de codificación de libro abierto: cuándo relajar restricciones de IA

ClarityHire Team(Editorial)3 min read

La era del libro cerrado ha terminado

Fingir que los candidatos no tienen ChatGPT, Stack Overflow, GitHub Copilot y la documentación para cada herramienta que usan es auto-engaño institucional. La pregunta seria ya no es "¿deberíamos dejarlos usar esto?" — es "¿qué evaluación produce señal cuando lo hacemos?"

Cómo se ve "libro abierto hecho bien"

Libro abierto no significa "más fácil". Hecho bien, significa:

  • El problema es más difícil que una versión de libro cerrado, porque el candidato tiene herramientas.
  • La calificación se enfoca en juicio, no en recuerdo.
  • El seguimiento es obligatorio, porque la presentación sola ya no es evidencia suficiente de autoría.

Tres formatos de libro abierto que producen señal

1. El "construye algo realista en 90 minutos"

El candidato tiene internet completo, IA completa, documentos completos. La tarea es realista y ligeramente mayor de lo que podrían hacer sin ayuda en el tiempo. La calificación se enfoca en: ¿hicieron las elecciones arquitectónicas correctas?, ¿priorizaron correctamente?, ¿tiene sentido el enfoque de pruebas?

Este formato recompensa a ingenieros experimentados que saben qué construir sobre mecanógrafos rápidos que pueden resolver desafíos de libro cerrado.

2. El ejercicio "mejorar esta base de código"

El candidato obtiene una base de código funcionando pero defectuosa. Tarea: identifica y arregla los tres problemas más grandes, con una explicación escrita. Herramientas permitidas: cualquier cosa.

Un ingeniero senior con IA es mucho más rápido que uno junior con IA. El diferenciador se convierte en qué problemas eligen arreglar.

3. La tarea "diseño + prototipo"

Un pequeño problema de diseño de sistemas (40 min) seguido de un prototipo de 50 minutos de la pieza más interesante. Abierto todo. La calificación se enfoca en la discusión de diseño y las elecciones hechas en el prototipo.

Cómo calificar libro abierto justamente

La rúbrica de calificación debe cambiar. Suelta "código idiomático escrito" — Copilot lo hace gratis. Añade dimensiones como:

  • "Hizo elecciones arquitectónicas apropiadas dadas las restricciones"
  • "Identificó lo correcto a construir primero"
  • "Capturó el caso extremo no obvio"
  • "Usó herramientas efectivamente y transparentemente"

El seguimiento obligatorio

Una discusión en vivo de 30–45 minutos de la presentación. El candidato camina a través de su código, explica elecciones, toma una pequeña solicitud de extensión. Aquí es donde se confirma la autoría.

Sin el seguimiento, libro abierto es incalificable. Con él, libro abierto te da mejor señal que cualquier entrevista de libro cerrado jamás lo hizo.

codificaciónIAevaluación abiertarealismo

Artículos relacionados