Der situative Beurteilungstest der Polizei von Avon and Somerset, Teil ihres Verfahrens zur Rekrutierung von Polizeibeamten, erzeugte eine große Lücke in der Bestehensquote zwischen Kandidaten aus schwarzen und ethnischen Minderheiten (BME) und anderen Kandidaten – nach einer Darstellung etwa 30 % gegenüber etwa 65 % –, obwohl der Inhalt des Tests überprüft worden war und keine offensichtliche Verzerrung in seinen Fragen oder seiner Bewertung zeigte. Ein Test, der auf dem Papier fair aussieht, kann dennoch von psychologischen Faktoren geprägt sein, die nichts mit seinem Inhalt zu tun haben.

Das Behavioural Insights Team, das mit der Polizeibehörde zusammenarbeitete, stellte die Hypothese auf, dass die Lücke durch Stereotypenbedrohung verursacht wurde – den gut dokumentierten Effekt, bei dem das Bewusstsein eines negativen Stereotyps über die eigene Gruppe selbst die Leistung bei einer Prüfung mit hohen Einsätzen beeinträchtigen kann, unabhängig von der tatsächlichen Fähigkeit. Übliche Maßnahmen gegen Testverzerrungen, wie die Überarbeitung der Frageformulierungen oder Bewertungsraster, würden nichts gegen einen psychologischen Effekt ausrichten, der eintritt, bevor ein Kandidat überhaupt die erste Frage liest.

Der E-Mail vor dem Test wurden selbstbestätigende Reflexionsfragen hinzugefügt, die die Kandidaten gegen Stereotypenbedrohung wappneten, wodurch die Lücke geschlossen wurde, ohne den Test zu verändern.

Stereotypenbedrohung beeinträchtigt die Leistung, bevor der Test beginnt, sodass inhaltliche Korrekturen nicht helfen können.

Selbstbestätigungsaufforderungen wirken als Puffer gegen Angst, indem sie die Kompetenz und Zugehörigkeit der Kandidaten bekräftigen.

Die Intervention zielt auf den psychologischen Zustand, nicht auf den Test, sodass sie die Standards nicht senkt.

Sie funktioniert nur, wenn die Lücke psychologisch und nicht strukturell bedingt ist, daher ist die Diagnose entscheidend.

Wenn eine fair wirkende Beurteilung dennoch Gruppenlücken zeigt, sollte man den psychologischen Zustand betrachten, den die Kandidaten mitbringen, nicht nur den Inhalt des Tests; eine kleine Intervention vor der Beurteilung kann die Lücke schließen.

BME-Kandidaten, die die vorbereitenden Fragen erhielten, bestanden den situativen Beurteilungstest in Raten, die mit denen von Nicht-BME-Kandidaten vergleichbar waren, wodurch eine Lücke, die zuvor von etwa 30 % bis zur Parität bei etwa 65 % gereicht hatte, ungefähr geschlossen wurde, ohne jegliche Änderung am Inhalt, Schwierigkeitsgrad oder der Bewertung des Tests.

DEN BELEGEN FOLGEN

Die Quellen

  1. Levelling the playing field in police recruitment: Evidence from a field experiment on test performance Public Administration 95(4), 2017 (Linos, Reinhard & Ruda), via UC Berkeley Goldman School of Public Policy · gspp.berkeley.edu
  2. Better, fairer recruitment with behavioural science MoreThanNow · morethannow.co.uk