Hoe bepaalt u het slagingspercentage voor een codeertoets

De verkeerde manier: "laten we 70% nemen"

De meeste teams kiezen een slagingspercentage door de kamer te pollen. "Wat voelt goed? 70? Laten we zeggen 75." Het getal wordt opgeschreven, de toets gaat live, en het wordt alleen herzien wanneer de wervingstrechter problemen oplevert — ofwel te weinig kandidaten passeren de drempel en de vacature blijft open, ofwel te veel kandidaten en de interviewronde wordt overspoeld.

Een scoredrempel is geen gevoelskwestie. Het is de meest consequente keuze in uw wervingstrechter: elk punt dat u verschuift, bepaalt wie naar het volgende stadium gaat. Dit verdient een systematische aanpak.

Wat een scoredrempel werkelijk betekent

Formeel gezien is een scoredrempel de grens tussen een minimaal gekwalificeerde kandidaat (MQC) — het laagste vaardigheidsniveau dat u zou willen aannemen — en iemand die u niet wilt doorsturen. Al het verdere volgt uit die ene definitie.

Twee veel voorkomende misverstanden:

• Een scoredrempel is niet het verwachte score van een typische aanname. Het is het minimum. De meeste van uw aannames moeten het comfortabel halen.
• Een scoredrempel is geen maatstaf voor de moeilijkheidsgraad van de toets. Twee toetsen met zeer verschillende moeilijkheidsgraden kunnen dezelfde MQC hebben, en dus zeer verschillende scoredrempels.

Stap 1: Schrijf de MQC op

Voordat u aan het getal begint, schrijft u een alinea ter beschrijving van de minimaal gekwalificeerde kandidaat voor deze rol op deze toets. Wees specifiek:

"Een backend-ingenieur met 2-3 jaar productieervaring die een CRUD-eindpunt met invoervalidatie kan implementeren, een test voor het gewenste pad kan schrijven en één randgeval zonder ondersteuning kan verwerken. Het kan zijn dat ze één van de drie secundaire randgevallen missen. Ze produceren leesbare code maar niet altijd elegante code."

Als u deze alinea niet kunt schrijven, bent u niet klaar om een scoredrempel in te stellen. Voer een kalibratie-sessie uit met het wervingsteam totdat u dat kunt.

Stap 2: Kies een methode

Drie methoden die professionals gebruiken, in toenemende orde van nauwkeurigheid:

Angoff-stijl schatting

Een panel van 3-5 ingenieurs die vertrouwd zijn met de rol voert de toets zelf uit en beoordeelt vervolgens elk onderdeel en schat de waarschijnlijkheid dat een MQC het juist zou beantwoorden. Tel deze waarschijnlijkheden bij elkaar op en u hebt een voorlopige scoredrempel. Ruw maar verdedigbaar — en veel beter dan niets.

Grenswaarde-groepsmethode

Identificeer 10-20 vorige kandidaten over wie het team het eens was dat ze "op het randje" waren — het had beide kanten op kunnen gaan. Bekijk hun werkelijke scores. De mediaan van die groep is uw voorlopige drempel. Dit vereist historische gegevens maar gebruikt werkelijk bewijs in plaats van gissingen van beoordelaars.

Contrasterende-groepsmethode

Trek twee sets vorige kandidaten: degenen die een aanbod kregen en goed presteerden in hun eerste zes maanden, en degenen die een aanbod kregen maar underperformden (of niet werden aangenomen in de volgende ronde). Zoek de score die de twee distributies het beste scheidt. De sterkste methode als u gegevens hebt, de zwakste als u die niet hebt.

De meeste teams moeten beginnen met Angoff voor de eerste versie van een nieuwe toets en overgaan naar grenswaarde-groep of contrasterende-groepen naarmate gegevens worden verzameld.

Stap 3: Kalibreer tegen uw werkelijke pool

Zodra u een voorlopige drempel hebt, voert u deze uit tegen uw laatste 50-100 voltooide toetsen en berekent u drie getallen:

• Slagingspercentage. Welk gedeelte van alle inzendingen passeert de drempel?
• Slagingspercentage top-kwartiel. Van kandidaten die u zonder twijfel zou interviewen, hoeveel passeren?
• Slagingspercentage onder-kwartiel. Van kandidaten die u zonder twijfel zou afwijzen, hoeveel passeren?

Twee foutmodi om op te letten:

1. Slagingspercentage top-kwartiel onder de 90% — uw drempel is te hoog; u wijst mensen af die u wilt.
2. Slagingspercentage onder-kwartiel boven de 10% — uw drempel is te laag; u laat mensen door die u niet wilt interviewen.

Als beide getallen goed lijken, zet de drempel in productie. Als een van beide afwijkt, is de juiste stap meestal niet om de drempel met 5% omhoog of omlaag te verschuiven — het is om naar welke vragen te kijken die verkeerd classificeren. Vaak zijn één of twee slecht gekalibreerde vragen verantwoordelijk, en het repareren daarvan is beter dan de drempel opnieuw af te stellen.

Stap 4: Pas aan voor de bron, niet de rol

Een geavanceerde toets uit een zorgvuldig samengestelde referentiepool heeft een fundamenteel andere scoreverdeling dan dezelfde toets met een open-call-pool. Dezelfde rol, dezelfde vragen, verschillende invoer.

De schoonste manier om hiermee om te gaan:

• Houd de scoredrempel gekoppeld aan de toets, niet het kanaal.
• Volg het slagingspercentage per bron afzonderlijk bij in uw wervingsanalytics.
• Gebruik slagingspercentages op bronniveau om te beslissen waar u wervingsinspanningen wilt steken, niet om de drempel voor één kanaal te buigen.

Teams die stilletjes de drempel voor "goede" bronnen verlagen, eindigen met twee onverwante problemen: hun drempel verschuift op manieren die niemand kan rechtvaardigen, en hun beste bronnen zien er niet meer zo goed uit zodra de vergelijking niet meer appels-met-appels is.

Stap 5: Let op het vals-negatieve aspect

De meeste gesprekken over scoredrempels richten zich op vals-positieven — kandidaten die slaagden maar dat niet hadden moeten doen. Vals-negatieven — sterke kandidaten die door een te hoge drempel worden afgewezen — zijn per definitie onzichtbaar. U ziet nooit wat ze in de interview zouden hebben gedaan.

Drie indicatoren voor vals-negatief risico:

• Grenswaarde-beoordelaar onenigheid. Als twee beoordelaars dezelfde inzending beoordelen en oneens zijn over meer dan één punt op de beoordelingsschaal, kunnen kleine drempelverschillen het resultaat bepalen op basis van ruis.
• Tijd-per-taak-uitschieters. Een kandidaat die net onder de drempel scoorde in 25% van de toegestane tijd geeft een ander signaal dan iemand die net eronder scoorde in 100% van de tijd. De eerste is vaak bijna geslaagd, de tweede vaak een echte afwijzing.
• Hertoets-overeenkomst. Bied voor een steekproef van grenswaarde-afwijzingen een korte vervolgexercitie aan. Als de meesten slagen, is de drempel te hoog of de toets te onbetrouwbaar.

Stap 6: Hertoe elk kwartaal

Een scoredrempel die in januari juist was, is waarschijnlijk in juni niet juist. Drie oorzaken van verschuiving:

• De toets veroudert. Vragen lekken naar LeetCode-stijl-opslagplaatsen en AI-trainingsgegevens. Scores stijgen niet omdat kandidaten beter werden, maar omdat de toets makkelijker werd.
• De kandidaatpool verschuift. Ontslagen, marktveranderingen en seizoenspatronen verplaatsen allemaal de verdeling.
• AI-ondersteuning wordt normaal. Naarmate kandidaten beter worden in het gebruik van LLM's, wordt wat een 70e percentiel-score was een 40e percentiel-score.

Voer elke kwartaal de kalibratie opnieuw uit op de meest recente 50-100 inzendingen en pas aan. Documenteer de wijziging en de reden — toekomstige u hebt het audittrail nodig.

Wat ClarityHire oppervlakt

Het wervingsanalysedashboard toont de scoreverdeling voor elke toets naast slagingspercentages per vraag en tijd per vraag, wat u nodig hebt voor zowel de eerste kalibratie als de kwartaalherscore. Slagingspercentages kunnen worden opgesplitst per bron, rol en tijdvenster zodat u verschuiving kunt opsporen voordat deze in de trechter verschijnt. Voor teams die AI-geclassificeerde coderingbeoordelingsschalen uitvoeren, geeft de indeling per beoordelingsschaaldimensie u aan of een grenswaarde-kandidaat op de grens ligt op correctheid, codekwaliteit of testen — drie verschillende beslissingen, die vaak onder één score worden samengevat.

Wat u nu kunt doen

Kies de ene toets die u het meest gebruikt en voer deze week de vierstaps-audit uit:

1. Schrijf de MQC-alinea voor die toets. Als het team het oneens is over de formulering, pauzeer dan en stem af voordat u iets anders doet.
2. Bereken top-kwartiel en onder-kwartiel slagingspercentages tegen uw huidige drempel.
3. Identificeer de twee of drie vragen die het meest mislassificering verrichten.
4. Kies één methode — Angoff als u van nul begint, contrasterende-groepen als u een jaar resultaatgegevens hebt — en produceer een verdedigbare drempel, schriftelijk, met het kalibratiebewijs eraan gehecht.

De scoredrempel is de plaats waar meting in beslissing verandert. Behandel het als elk ander belangrijk onderdeel van de infrastructuur: gedocumenteerd, getest en volgens schema herzien.