인지능력검사에 구조화 면접을 더할 때의 증분효용과 성별 합격률 격차
한 제조업체가 올해 신입 60명을 뽑으려고 지원자 400명을 받았다. 선발비율은 0.15이며, 선발된 집단의 표준화된 평균 준거점수(Z)는 1.55로 계산됐다. 현재는 지필 인지능력검사만 쓰고 있고, 입사 1년 뒤 상사 평정을 준거로 한 타당도계수는 .30이었다. 인사팀은 구조화 면접을 추가하려 한다. 면접의 단독 타당도계수는 .40, 인지능력검사와 면접의 상호상관은 .25로 보고됐다. 면접은 지원자 전원에게 실시할 계획이고, 응시자 1인당 비용은 5만 원(총 2,000만 원)이다. 준거 표준편차의 40%를 경제적 가치로 환산한 SD_y는 1,600만 원으로 가정한다. 한편 지난해 선발 결과를 성별로 나누면 남성 지원자 240명 중 45명(18.75%), 여성 지원자 160명 중 15명(9.375%)이 합격했다. 인사팀은 “면접을 넣으면 점수가 낮은 지원자도 올라갈 수 있으니 여성 합격자를 조정하자”고 제안했다.
1. 구조화 면접을 추가할 때의 다중상관과 증분효용을 계산하고, 도입 여부를 판단하시오.
Read the worked answer
1. 다중상관 계산
- R = √[(r₁² + r₂² − 2r₁r₂r₁₂) / (1 − r₁₂²)]
- = √[(.09 + .16 − 2×.30×.40×.25) / (1 − .0625)] = √[(.25 − .06) / .9375] = √.2027 ≈ .45
- 결정계수는 .2027로, 인지능력검사 단독(.09)보다 설명력이 약 .113 증가한다.
2. 증분효용 계산(Brogden-Cronbach 근사)
- ΔU = Δr × SD_y × Z × N = (.45 − .30) × 1,600만 원 × 1.55 × 60
- = .15 × 1,600만 원 = 240만 원 → ×1.55 = 372만 원 → ×60 = 2억 2,320만 원
- 비용 2,000만 원을 빼면 순효용은 약 2억 320만 원이다. 비용 대비 편익이 압도적이므로 도입할 근거가 있다.
3. 판단에 붙일 단서
- SD_y를 연봉의 40%로 두는 것은 관례적 가정이지 측정값이 아니다. 비용에도 면접관 교육·시간 비용이 빠져 있다.
- 타당도계수 .30은 지원자 400명 전체에서 나온 값이지만 준거는 60명에게만 있다. r=.30의 표준오차는 대략 (1−.09)/√400 ≈ .046이므로 95% 신뢰구간은 .21~.39로 넓다. 점추정 하나로 도입을 확정하지 말고 타당도 연구를 병행해야 한다.
- 전원 면접이 아니라 1차 점수 상위자에게만 면접하면 비용은 줄지만 다중상관 구조가 달라진다(범위 제한). 이 경우 별도로 재계산해야 한다.
2. 지난해 선발 결과의 성별 합격률을 근거로 차별 소지를 판정하고, “여성 합격자를 조정하자”는 제안에 대한 대응을 설계하시오.
Read the worked answer
1. 합격률 비율 계산
- 여성 15/160 = 9.375%, 남성 45/240 = 18.75%
- 비율 = 9.375 ÷ 18.75 = 0.5로 4/5(0.8) 기준에 한참 못 미친다. 불리한 영향(adverse impact)이 강하게 시사된다.
2. 그러나 결론은 “차별”이 아니라 “입증 책임의 전환”이다
- 한국법에는 4/5 규칙이 명문으로 없고, 판례상 합리적 이유가 있는지, 간접차별에 해당하는지를 심는다. 선발도구가 직무수행능력과 관련되고 선발 필요성에 비례한다는 점을 사용자가 설명해야 한다.
- 표본이 60명뿐이라 비율은 변동이 크다. 남성 45명, 여성 15명 기준으로 합격률 차이의 신뢰구간을 감안하면 “0.5”라는 수치 하나로 확정하기는 이르지만, 원인 조사는 필수다.
3. “여성 합격자를 조정하자”는 제안은 수용할 수 없다
- 점수를 성별로 사후 조정하는 것은 능력주의 원칙과 채용 공정성 규정에 정면으로 어긋나고, 남성 지원자에게는 역차별 소지를 만든다.
4. 대응 설계
- ①인지능력검사의 직무관련성과 준거타당도 연구를 문서화한다. ②구조화 면접·직무지식시험·경력평가 등 타당도가 확보된 대안을 검토한다. ③검사 문항의 불필요한 언어·수리 편향을 점검한다. ④합격선 근처에서 점수대(band)를 두고 그 안에서 면접 등 다른 준거로 판단하는 방식을 검토한다. ⑤성별 합격률을 매 선발 주기마다 모니터링한다.
3. 상사 평정을 준거로 쓸 때 타당도 해석에 어떤 한계가 있는지, 이 사례의 수치를 예로 들어 설명하시오.
Read the worked answer
1. 준거 결함과 준거 오염
- 상사 평정은 후광효과, 관대화 경향, 평정자 간 신뢰도 문제를 안는다. 평정자 교육 없이 1년차 평정을 그대로 쓰면 타당도계수가 실제 직무수행이 아니라 평정 습관을 반영할 수 있다.
- 반대로 실제 성과와 무관한 요소(출근 태도, 인상)가 평정에 섞이면 준거 오염이다.
2. 범위 제한과 표본 크기
- 타당도계수 .30은 지원자 400명의 점수 분포에서 나왔지만, 준거는 선발된 60명에게만 존재한다. 선발된 집단은 점수 분포가 좁아져 상관이 낮게 추정되는 경향이 있다.
- r=.30의 표준오차를 감안하면 .21~.39 수준의 불확실성을 안고 판단해야 한다.
3. 시간과 준거 측정 시점
- 1년 뒤 평정은 입사 직후의 적응 기간을 포함한다. 교육·배치 효과가 섞이면 검사점수와 준거의 인과 해석이 흐려진다.
4. 실무적 결론
- 타당도계수를 “검사의 성질”로 읽지 말고 “이 표본, 이 준거, 이 시점에서의 추정치”로 읽는다. 면접 추가 시 증분효용 2억여 원 같은 계산도 이 불확실성 위에 얹힌 추정임을 인사팀에 명시해야 한다.