에이번 서머싯 경찰, 시험 전 후보자 사전 준비로 BME 합격률 격차 해소

경찰관 채용 과정의 일부인 에이번 서머싯 경찰의 상황판단시험은 흑인 및 소수민족(BME) 후보자와 다른 후보자 사이에 큰 합격률 격차를 만들어내고 있었다. 한 설명에 따르면 약 30% 대 약 65%였는데, 시험 내용을 검토한 결과 질문이나 채점에서 노골적인 편향은 나타나지 않았다. 서류상으로는 공정해 보이는 시험도 그 내용과 무관한 심리적 요인에 의해 영향을 받을 수 있다.

해당 경찰청과 협력한 행동통찰팀(Behavioural Insights Team)은 이 격차가 고정관념 위협(stereotype threat)에 의해 발생했다고 가설을 세웠다. 이는 자신이 속한 집단에 대한 부정적 고정관념을 인식하는 것 자체가 실제 능력과 무관하게 중대한 평가에서의 수행을 저하시킬 수 있다는 잘 문서화된 효과이다. 질문 문구나 채점 기준을 수정하는 것과 같은 시험 편향에 대한 표준적인 해결책은 후보자가 첫 질문을 읽기도 전에 발생하는 심리적 효과를 해결하지 못한다.

시험 전 이메일에 자기확언적 성찰 질문을 추가하여 후보자들이 고정관념 위협에 대비하도록 사전 준비시켰고, 이는 시험을 변경하지 않고도 격차를 해소했다.

고정관념 위협은 시험이 시작되기 전에 수행을 저하시키므로 내용 수정으로는 도움이 되지 않는다.

자기확언 촉구는 후보자의 역량과 소속감을 재확인함으로써 불안에 대한 완충 역할을 한다.

이 개입은 시험이 아니라 심리적 상태를 겨냥하므로 기준을 낮추지 않는다.

이는 격차가 구조적이지 않고 심리적인 경우에만 효과가 있으므로 진단이 핵심이다.

공정해 보이는 평가에서도 집단 간 격차가 여전히 나타난다면, 시험 내용만이 아니라 후보자가 지니고 들어오는 심리적 상태를 살펴보아야 한다. 평가 전의 작은 개입으로 격차를 해소할 수 있다.

사전 준비 질문을 받은 BME 후보자들은 비BME 후보자들과 비슷한 비율로 상황판단시험에 합격하여, 이전에 약 30%에서 약 65%의 동등 수준까지 이어졌던 격차를 시험의 내용, 난이도, 채점을 전혀 변경하지 않고 대략적으로 해소했다.