Come valutare i Responsabili di ingegneria: Ciclo di intervista e griglia di valutazione

Il problema della valutazione dei Responsabili di ingegneria

La maggior parte dei cicli di intervista per i Responsabili di ingegneria è un'intervista da ingegnere senior con un colloquio comportamentale aggiunto. Per questo motivo così tanti EM assumono falliscono nei loro primi sei mesi: le parti del lavoro che contano davvero — condurre 1:1, navigare una riorganizzazione, responsabilizzare una risorsa in difficoltà, confrontarsi con un VP — non vengono affatto intervistate.

La modalità di fallimento opposta è ancora peggiore. I team sovracorrezzono e assumono un EM che intervista magnificamente su argomenti relazionali ma non riesce a leggere una pull request o a opporsi a una cattiva decisione tecnica. Pochi mesi dopo, il team è insoddisfatto perché il manager non può aiutarli a distribuire il prodotto.

Hai bisogno di un ciclo di intervista che testi entrambe le metà del lavoro e una griglia che le valuti separatamente.

Quello che un EM fa realmente

Prima di progettare il ciclo, mettiti d'accordo su quello che stai cercando di assumere. Il lavoro si scompone in quattro competenze, grosso modo in quest'ordine di quanto spesso creano problemi all'EM:

1. Gestione del personale. 1:1, gestione della performance, coaching, assunzione, licenziamento, crescita della carriera.
2. Esecuzione cross-funzionale. Tradurre obiettivi ambigui in lavoro consegnabile, gestire gli stakeholder, sbloccare il team.
3. Giudizio tecnico. Leggere il codice, valutare i trade-off dell'architettura, sapere quando sovrascrivere una decisione di un ingegnere e quando deferire.
4. Strategia e prioritizzazione. Dire di no, scegliere quello che il team non farà, difendere il budget delle risorse.

La combinazione varia per livello. Un EM di primo livello con 4 risorse ha bisogno soprattutto di (1) e (2). Un EM senior che gestisce più team ha bisogno di (3) e (4) più di quanto abbia bisogno di condurre 1:1.

Il ciclo a quattro fasi

Fase 1: Approfondimento comportamentale (60 minuti, dal vivo)

Il round con il segnale più alto. Esegui un'intervista comportamentale strutturata con tre o quattro domande ristrette che forzino il candidato in situazioni passate specifiche:

• "Raccontami di una risorsa che stava sottoperformando. Cammina con me attraverso la prima conversazione, il piano che hai fatto insieme, e come è finita."
• "Raccontami di una decisione tecnica in cui non eri d'accordo con il tuo ingegnere più senior. Cosa hai fatto?"
• "Raccontami di un momento in cui un leader sopra di te ha spinto per una scadenza che pensavi fosse sbagliata. Percorri con me quello che hai detto e cosa è successo."

Scava in profondità. La prima risposta è solitamente generica ("abbiamo lavorato insieme su di essa"). Segui con: In quale settimana hai deciso di metterli in un piano? Cosa esattamente hai scritto? Cosa ha detto il tuo skip? Se il candidato non riesce a entrare in specifici entro due follow-up, sta raccontando la storia di qualcun altro.

Usa una scorecard con livelli ancorati per competenza, compilata dall'intervistatore durante la conversazione, non dopo.

Fase 2: Simulazione live di gestione del personale (45 minuti)

Il round comportamentale ti dice quello che hanno fatto. La simulazione ti dice quello che farebbero domani. Due scenari funzionano bene:

• La risorsa in difficoltà. "Ecco una sintesi di tre mesi di note da 1:1 per una delle tue risorse. Erano un'assunzione forte, l'ultimo trimestre è stato un calo, e il team sta iniziando a notarlo. Cammina con me attraverso il prossimo 1:1 che condurresti." Fai un role-play della conversazione; l'intervistatore interpreta la risorsa.
• L'esplosione interpersonale. "Due delle tue risorse hanno avuto un disaccordo teso in una revisione del design. Entrambi sentono di essere stati mancati di rispetto. Cammina con me attraverso come gestisci le prossime 48 ore."

Ascolta: saltano a una conclusione, o fanno prima domande? Passano attraverso la meccanica HR sull'autopilota, o pensano alla persona di fronte a loro? Proteggono il loro team senza assolverlo?

Questa fase è scomoda per i candidati che hanno gestito solo in acque calme. Esattamente il punto.

Fase 3: Credibilità tecnica (60 minuti)

Gli EM non hanno bisogno di superare in ingegneria il loro miglior ingegnere. Hanno bisogno di:

• Leggere una pull request non banale e identificare la parte più rischiosa.
• Diagnosticare un incidente di produzione da una bozza di postmortem e fare le giuste domande.
• Fare una piccola chiamata di system design senza fumare.

Un formato utile: dai al candidato una PR di 200 linee dal tuo codebase effettivo (sanitizzato), un contesto di un paragrafo, e chiedili di fare una revisione del codice dal vivo ad alta voce per 25 minuti. Quindi esegui una conversazione di 30 minuti su un piccolo system design al livello di dettaglio con cui lavorano le loro risorse, non un round "design Twitter" di Big Tech.

Se stai assumendo un EM che non scriverà codice, puoi saltare completamente gli esercizi di scrittura. Non puoi saltare la lettura del codice e il giudizio del design. Un EM che non riesce a dire se il piano di un senior IC è sensato sarà schiacciato.

Fase 4: Strategia e prioritizzazione (45 minuti)

Dai al candidato un documento di una pagina: gli obiettivi attuali di un team fittizio, il budget delle risorse, progetti in corso, incidenti recenti, e una richiesta di leadership per aggiungere un'altra iniziativa. Chiedigli di camminare con te attraverso:

• Quello a cui direbbero di no, e come lo direbbero a chi.
• Quello che il team farà e non farà il prossimo trimestre.
• Quale segnale traccierebbero per sapere se il piano stava funzionando.

Stai testando se riescono a mantenere un'opinione vera sotto pressione, e se riescono a venderla in un modo che non li fa licenziare. Entrambi sono necessari.

La griglia

Punteggia ogni fase indipendentemente attraverso le quattro competenze. Una semplice griglia ancorata funziona:

Calibra prima che il ciclo si esegua, non dopo. La calibrazione dell'intervistatore su cosa significhi "sulla soglia" per il tuo team è la leva più grande che hai per ridurre gli esiti di "assume poi te ne penti".

Modi comuni in cui questo ciclo va storto

• Il hiring manager esegue ogni round. Senti solo te stesso. Porta un IC, un EM pari e un exec sul ciclo.
• Nessuno testa la credibilità tecnica. Il team scopre che l'assunzione non riesce a seguire una revisione del design tra tre settimane.
• Assumi sulla cultura e la narrativa. Ogni EM in assunzione può raccontare una bella storia al loro terzo ciclo. Ancorare sulla simulazione e sulla griglia, non sulle vibes.
• Salta i riferimenti. Per gli EM più di qualsiasi altro ruolo, parla con due risorse ex, non solo manager ex. Le risorse ex ti dicono cosa sia stato effettivamente lavorare per la persona.

Cosa fare dopo

Se stai eseguendo un ciclo di EM nel prossimo mese, scrivi la griglia prima, prima di scegliere gli intervistatori. Usala come briefing: ogni intervistatore se ne va con una o due competenze ancorate di cui sono responsabili del rating, non un vago round di "impressione generale".

Per una vista end-to-end di come questo ciclo si trova nel resto della tua pipeline di assunzione dell'ingegneria, vedi la nostra guida del ciclo di intervista di ingegnere senior e come costruire una scorecard di assunzione per ingegneri senior — il ciclo di EM prende in prestito la stessa meccanica di scorecard, con gestione del personale scambiata per profondità IC grezza.