Wie man Interviewerinnen kalibriert, damit zwei Engineerinnen dieselbe Bewerberin gleich bewerten
Die Uneinigkeit, die zählt
Zwei deiner Engineerinnen interviewen dieselbe Bewerberin. Eine sagt Strong Hire. Die andere sagt No Hire. Das passiert ständig. Instinkt: den Engineerinnen die Schuld geben — „sie haben unterschiedliche Hürden." Die Wahrheit ist, dass sie fast immer unterschiedliche Rubriken im Kopf haben, keine unterschiedlichen Hürden.
Kalibrierung ist der Prozess, diese internen Rubriken anzugleichen. Es geht nicht darum, Leute laxer oder strenger zu machen.
Der Minimum-viable-Kalibrierungs-Loop
Du brauchst kein Quartal Training. Du brauchst ein wiederkehrendes 60-Minuten-Meeting:
- Wähle einen kürzlich abgeschlossenen Loop. Alle Interviewerinnen kommen.
- Jede bewertet die Einreichung der Bewerberin gegen die Rubrik erneut, unabhängig, vor dem Meeting.
- Im Meeting Scores gleichzeitig enthüllen. Wo es Uneinigkeit in einer Rubrikdimension gibt, erläutern die zwei höchsten und niedrigsten Bewertenden ihr Reasoning.
- Aktualisiere die Rubrik-Anker. Fast immer geht Uneinigkeit auf einen mehrdeutigen Anker zurück — „zeigt klare Kommunikation" bedeutet für verschiedene Leute Verschiedenes. Schreibe den Anker mit einer Verhaltensbeschreibung neu.
Mache das alle 2–3 Wochen. Bis zur dritten Session werden Uneinigkeiten kleiner, und die Rubrik zieht sich zusammen.
Was die Daten sagen
Wenn ClarityHire-Teams diesen Loop über strukturierte Interviews laufen lassen, bewegt sich Inter-Rater-Reliabilität (Korrelation zwischen zwei Interviewerinnen bei derselben Bewerberin) typischerweise von ~0,45 auf ~0,75 in 6–8 Wochen. Das ist der Unterschied zwischen „Interviewen ist Münzwurf" und „Interviewen ist Signal".
Häufige Kalibrierungsfehler
- Nur auf Hires kalibrieren. Du lernst am meisten von Bewerberinnen nahe der Hürde. Ein klarer Strong-Hire lehrt dir nichts über die Hürde.
- Die lauteste Stimme den Raum ankern lassen. Scores gleichzeitig enthüllen. Niedrigste Bewertende spricht zuerst.
- Das Rubrik-Update überspringen. Endet das Meeting ohne einen einzigen Anker zu ändern, hast du nicht kalibriert — du hast geredet.
- Personen statt der Rubrik kalibrieren. „Sarah ist zu hart" ist der falsche Rahmen. „Der Anker für Level 3 ist mehrdeutig" ist der richtige.
Was ClarityHire tut
Die Berichte für strukturierte Interviews bewahren Score und Begründung pro Rubrikdimension jeder Interviewerin auf, beim Submit gesperrt. Du kannst eine Kalibrierungs-Sicht ziehen, die Scores über Interviewerinnen für dieselbe Bewerberin aufreiht, ohne zu leaken, wer was bewertete, bis alle eingereicht haben. Das macht das Kalibrierungsmeeting ehrlich.