"Je zit in een meeting en je collega neemt de credits voor jouw idee. Wat doe je?" Situaties als deze vormen de kern van Situational Judgment Tests, een van de meest gebruikte assessmentmethoden in recruitment. Maar nieuw onderzoek werpt een fundamentele vraag op: wat meten SJTs eigenlijk?
Het antwoord is verrassend: het hangt ervan af. Sterk ervan af. Een SJT is geen test in de traditionele zin, maar een methode die totaal verschillende dingen kan meten afhankelijk van hoe je hem ontwerpt. Dit inzicht heeft ingrijpende gevolgen voor hoe we SJTs moeten ontwikkelen, valideren en gebruiken.
Het constructvaliditeitsprobleem
De onderzoekers - een internationaal team van psychometrici - analyseerden tientallen SJT-instrumenten en hun correlatiepatronen met andere tests. Ze vonden enorme variatie:
Sommige SJTs correleerden sterk met cognitieve tests - ze meten kennelijk vooral "weten wat je moet doen". Andere correleerden met persoonlijkheidsschalen - ze meten "geneigd zijn om het juiste te doen". Weer andere waren praktisch ongerelateerd aan bestaande constructen.
"Een SJT is geen uniforme test maar een methode", concluderen de onderzoekers. "Elk instrument meet iets anders, afhankelijk van de scenario's, de antwoordopties, en de scoringsmethode."
Waarom dit uitmaakt
Voor HR-professionals heeft dit praktische consequenties. Je kunt niet zomaar "een SJT" toevoegen aan je selectieproces en aannemen dat het "situationeel oordeelsvermogen" meet. Je moet weten wat jouw specifieke SJT meet - en of dat relevant is voor de functie.
Selection Lab adresseert dit door SJTs altijd te combineren met andere assessments. "Een SJT kan waardevol zijn voor specifieke competenties", legt oprichter Lotte Welten uit. "Maar je moet precies weten wat je meet. Daarom valideren wij elk instrument voor de specifieke context waarin het wordt ingezet."
GITP heeft vergelijkbare principes geïntegreerd in hun leiderschapsassessments. Hun SJT-scenario's zijn specifiek ontwikkeld voor leiderschapscontexten en apart gevalideerd - niet geleend van generieke instrumenten.
Praktische aanbevelingen
De onderzoekers geven concrete handvatten:
- Vraag naar validatiedata: Als je een SJT aanschaft, vraag dan naar de specifieke validatie voor jouw toepassing. Generieke "SJT-validiteit" bestaat niet.
- Begrijp het design: Gebruikt de SJT "knowledge" of "behavioral tendency" instructies? Dit beïnvloedt fundamenteel wat je meet.
- Combineer altijd: SJTs zijn het meest waardevol in combinatie met andere methoden zoals cognitieve tests en persoonlijkheidsassessments.
- Monitor uitkomsten: Voorspelt jouw SJT daadwerkelijk werkprestaties? Alleen follow-up onderzoek kan dat bevestigen.
De bredere les
Dit onderzoek illustreert een breder principe: in assessment is context alles. Wat werkt voor de ene functie of organisatie, werkt niet automatisch voor de andere. De beste assessmentprofessionals - en de beste platforms - begrijpen dit en bouwen maatwerk in plaats van one-size-fits-all oplossingen.
