변별력을 200% 더 높인 개발자 채용 방법: 코드 리뷰 테스트 | 인프콘2023

코드 리뷰 테스트는 지원자가 코드를 제출하는 대신, 회사가 코드를 보여주고 지원자가 그에 대한 리뷰를 남기는 테스트다. 여러 역량을 종합적으로 볼 수 있고, 집을 짓게 하는 것보다 지어진 집에 피드백하게 하는 것이 부담이 적다. 서류 합격 시 개인별 프라이빗 리포지토리에 초대돼 열린 PR에 리뷰를 남기며, 서버 채용이므로 Java·Spring 프로젝트로 구성된다. 문제 개발은 팀에서 좋았던 코드 리뷰를 떠올려 왜 좋았는지 검증하고, 팀 내 서버 개발자 기술 인재상으로 일곱 가지 역량을 정의해 이를 드러내는 리뷰들로 초안을 만들었다. 운영 코드는 너무 커서 간단히 다시 모델링해 한 시간이면 풀 수준으로 경량화했다(실제로는 더 넉넉한 시간 제공). 이렇게 코딩 테스트를 대체해 서류 → 코드 리뷰 테스트 → 인터뷰 프로세스를 만들고, 2023년 3월부터 코딩 테스트를 완전히 중단하고 코드 리뷰 테스트만으로 채용하고 있다.

정량 평가에서 코드 리뷰 테스트는 서류 통과 40명 중 34명 제출, 15명 통과, 그중 8명이 직무 인터뷰를 통과했다. 메인 지표인 '테스트 통과자의 인터뷰 통과율'이 코딩 테스트 대비 두 배 이상 좋아, 인터뷰 통과자 한 명을 모시는 시간이 약 10시간에서 5시간으로 절반 단축됐다. 테스트를 어렵게 만들어 어뷰징하는 것을 막기 위해 건전성 지표로 '응시자의 인터뷰 통과율'과 '제출률'을 함께 관리했고 둘 다 양호해, 높은 건전성을 유지하며 변별력 두 배를 달성했다. 정성 후기로 실무 능력을 종합 파악하고 인재상에 맞춰 검증 항목을 자유롭게 설계할 수 있었으며, 지원자 부담이 적고 채용 리드 타임이 감소했다고 정리한다. 한계로는 기술 스택·코드 리뷰에 익숙해야 해 신입에는 부적절하고, 다른 스택 지원자가 불리할 수 있다는 점을 든다(이를 줄이려 일반적 서버 개발 강점으로도 답할 수 있게 설계). AI 어뷰징은 직접 여러 번 시도해 실패했으나 100% 안전하다고 할 수는 없다고 솔직히 밝히며, 모든 상황의 정답은 아니라고 못 박고 마친다.