인사평가 캘리브레이션 회의 운영법: 평가자마다 다른 점수를 맞추는 안건 양식
인사평가 캘리브레이션(보정 회의)은 등급 비율을 맞추는 자리가 아니라, 팀장마다 다른 잣대를 같은 근거 위에서 맞추는 회의입니다. 연구에서는 보정 회의가 평가자 간 일관성을 높이지만, 점수가 가운데로 몰리고 회의에서 방어를 잘하는 팀장의 팀원이 더 높은 등급을 받는 문제도 함께 나타났습니다. 사람마다 근거를 같은 형식으로 미리 받고, 경계에 걸린 사람만 안건에 올리고, 바꾼 등급마다 사유를 남기면 이 문제를 줄일 수 있습니다.
보정 회의는 무엇을 맞추는 회의인가요?
보정 회의는 팀장마다 다른 잣대를 맞추는 회의입니다. 등급 비율을 맞추는 일은 그 결과로 따라오는 한 단계일 뿐입니다. 1차 평가가 끝난 뒤 평가자들이 모여, 같은 수준의 일에 같은 등급이 붙었는지 근거를 놓고 확인합니다.
잣대 차이는 생각보다 큽니다. 관리자 4,492명이 상사·동료·부하·본인에게 받은 육성 목적의 다면평가를 분석한 연구에서, 점수 차이 가운데 평가자 고유의 성향으로 설명되는 몫이 두 표본에서 62%, 53%였습니다. 평가받는 사람의 실제 성과로 설명되는 몫은 21%, 25%에 그쳤습니다.[1]
이 연구는 연봉에 쓰는 인사고과가 아니라 육성 목적의 평가를 다뤘습니다. 그래도 “어느 팀장을 만나느냐에 따라 등급이 갈린다”는 현장의 불만이 감이 아니라는 근거로는 충분합니다. 다면평가가 ‘인기투표’라는 불만을 듣고 있다면 인기투표가 된 다면평가를 고치는 4가지 방법을 함께 보세요.
보정 회의를 하면 평가가 실제로 공정해지나요?
일관성은 높아지지만, 회의 자체가 만드는 편향도 있습니다. 보정 회의를 직접 들여다본 연구는 많지 않고, 지금까지 나온 결과는 아래와 같습니다.
| 연구 | 대상 | 확인된 것 |
|---|---|---|
| Demeré 외 (2019)[2] | 다국적 기업 한 곳의 내부 평가 자료 | 보정 위원회가 바꾼 평가는 25%. 내릴 때가 올릴 때보다 잦고 폭도 컸음. 후한 평가자의 점수는 내리고 박한 평가자의 점수는 올려 평가자 간 일관성이 높아지고 관대화가 줄었지만, 점수가 가운데로 몰리는 경향은 커짐 |
| Speer 외 (2019)[3] | 현장 연구 두 건 | 보정 후 등급이 보정 전보다 다른 성과 지표와 더 잘 맞았음. 관리자들은 회의 뒤 평가 기준이 맞춰지고, 책임감과 판단할 정보가 늘었다고 느낌 |
| Bol 외 (2025)[4] | 한 회사의 직원 737명, 평가자 114명 | 팀장이 회의에 내놓는 정보를 골라 정보 공유가 줄었음. 검토를 피하고 조정에 맞서기 쉬운 팀장일수록 조정을 덜 받았고, 성과를 같게 놓고 봐도 그 팀원의 등급이 더 높게 끝남 |
세 연구를 합치면 결론은 하나입니다. 보정 회의는 평가자 간 차이를 줄이지만, 근거 없이 말로 진행하면 설명을 잘하는 팀장의 팀원이 유리해지고 애매한 사람은 가운데 등급으로 밀립니다.
보정 회의 전에 무엇을 준비하나요?
회의 일주일 전까지 사람마다 같은 형식의 근거를 받아 두는 것이 핵심입니다. 회의장에서 처음 듣는 설명은 말솜씨로 평가되고, 미리 읽은 근거는 내용으로 평가됩니다.
회의 전 준비물
| 준비물 | 누가 | 내용 |
|---|---|---|
| 등급 정의서 | 인사팀 | 등급마다 뜻과 예시 한 줄. 회의 첫머리에 함께 읽음 |
| 평가자별 등급 분포 | 인사팀 | 팀장마다 S·A·B·C·D 비율. 전체 평균과 크게 다른 평가자 표시 |
| 사람별 근거 시트 | 1차 평가자 | 항목별 점수와 근거(언제, 무엇을, 어디에 남은 기록). 근거가 없는 항목은 빈칸 |
| 안건 명단 | 인사팀 | 아래 기준에 걸리는 사람만. 회의 사흘 전 참석자에게 공유 |
| 회사 등급 규정 | 인사팀 | 상대평가라면 등급별 비율, 절대평가라면 등급 조건 |
| 기록 양식 | 인사팀 | 결정과 사유를 적을 표 (아래 ‘기록 양식’) |
근거 시트의 형식은 인사고과 평가표 양식의 근거 칸을 그대로 써도 됩니다. 중요한 것은 모든 팀장이 같은 칸을 같은 방식으로 채워 오는 것입니다.
어떤 사람을 안건에 올리나요?
전원을 다루지 않고, 판단이 갈릴 만한 사람만 올립니다. 모든 사람을 한 번씩 이야기하면 회의 후반에 다루는 사람일수록 시간에 쫓겨 가운데 등급으로 정리됩니다.
- 등급 경계에 걸린 사람: 환산 점수가 두 등급 사이 경계 근처
- 근거가 빈 항목이 많은 사람: 점수는 있지만 받쳐 줄 기록이 부족함
- 분포가 튀는 평가자의 팀원: 전체 평균보다 크게 후하거나 박한 팀장의 상위·하위 등급
- 등급이 다른 결정으로 이어지는 사람: 승진 후보, 최하위 등급 후보
- 팀은 다르지만 직무·레벨이 같은 사람끼리: 같은 표에 놓고 비교할 때만 잣대 차이가 보임
회의는 어떤 순서로 진행하나요?
등급 정의를 먼저 맞추고, 사람별 논의는 근거부터 읽고, 분포 확인은 맨 마지막에 합니다. 비율부터 보면 사람을 근거가 아니라 남은 자리에 맞추게 됩니다.
진행 순서 (안건 10명 기준, 2시간 남짓)
- 취지와 규칙 확인 (5분): 진행은 인사 담당자가 맡음. 회의 내용은 밖으로 나가지 않는다는 점, 근거가 없는 주장은 결정에 쓰지 않는다는 점을 먼저 말함
- 등급 정의 함께 읽기 (10분): ‘A는 기대를 넘었다’가 각 팀장에게 무슨 뜻인지 예시 한두 개로 맞춤
- 평가자별 분포 보기 (5분): 누가 후하고 누가 박한지 사실로만 확인. 이 단계에서 등급은 바꾸지 않음
- 사람별 논의 (한 명당 8~10분)
- 참석자 모두 근거 시트를 읽음 (2분)
- 1차 평가자가 근거에 없는 맥락만 보탬 (2분)
- 다른 참석자가 질문함. “같은 근거에 우리 팀이라면 몇 점을 줬을까”를 기준으로 (3분)
- 결정하고 사유를 한 줄로 기록함 (2분)
- 회사 규정과 비교 (10분): 상대평가라면 이때 비율을 확인. 넘친 등급이 있으면 4단계에서 근거가 가장 약했던 사람부터 다시 봄
- 결과 확인과 마무리 (10분): 바뀐 등급을 소리 내어 읽고, 면담에서 전할 말을 1차 평가자와 맞춤
4단계의 순서가 중요합니다. 1차 평가자의 설명보다 근거를 먼저 읽게 하면, 회의에서 방어를 잘하는 팀장이 유리해지는 문제를 줄일 수 있어요.
결정은 어떻게 기록하나요?
바꾼 등급만이 아니라 유지한 등급도 사유를 한 줄 남깁니다. 다음 시즌에 같은 논쟁을 반복하지 않고, 이의 제기가 들어오면 이 표가 첫 번째 자료가 됩니다.
기록 양식
| 칸 | 작성 예시 |
|---|---|
| 대상 (직무·레벨) | 직원 R (마케팅, L2) |
| 1차 등급 | A |
| 근거 요약 | 3분기 캠페인 실험 2건 주도(회고 문서), 협업 항목은 근거 없음 |
| 제기된 질문 | 실험 결과 공유가 마감 뒤였던 건이 몇 번인가 |
| 최종 등급 | B |
| 사유 | 같은 레벨 비교 시 성과 근거는 A에 가깝지만 공유 항목 근거가 기대에 못 미침 |
| 결정자 | 평가권자 ○○○ (회의 참석: 팀장 4명, 인사팀) |
| 면담에서 전할 것 | 공유 시점 개선을 다음 기간 목표로, 비어 있는 협업 항목은 면담에서 확인 |
평가 결과를 저성과자 조치에 쓸 수 있다면 이 기록은 더 중요해집니다. 대법원은 근무성적 불량을 이유로 한 해고에서 근거가 된 평가가 공정하고 객관적인 기준에 따라 이루어진 것이어야 하고, 다른 근로자보다 상대적으로 낮은 정도를 넘어야 한다고 보았습니다.[6] 비율을 맞추느라 붙은 하위 등급은 그 자체로 저성과의 근거가 되기 어렵습니다. 불이익 처분에 쓰기 전에는 노무 전문가의 검토를 받으세요.
보정으로 등급이 내려간 사람에게는 어떻게 전하나요?
등급이 내려간 이유를 사실과 기준으로 설명하고, 다음 기간에 무엇을 보면 되는지 함께 전합니다. 다만 설명만으로 충분하다고 기대하면 안 됩니다.
다국적 기업 한 곳을 분석한 연구에서, 상위 등급 후보였다가 상위 등급 비율 제한으로 등급이 내려간 직원은 자발적으로 퇴사할 가능성이 최소 34% 높았습니다. 회사가 보정 과정의 편향을 피하고, 경력 전망에 대해 안심시키고, 상위 등급자보다 큰 보너스를 주었는데도 결과는 같았습니다.[5]
이 결과는 회의에서 할 일을 하나 더 알려 줍니다. 비율에 맞춰 누군가를 내려야 한다면, 그 결정이 근거에서 나온 것인지 남은 자리에서 나온 것인지를 회의에서 먼저 구분해야 합니다. 근거가 같은데 비율에 밀려 내려간 사람이 있다면 그 사실을 기록에 남기고, 면담에서도 그대로 말하는 편이 낫습니다.
근거를 모으는 일은 왜 늘 회의 직전에 몰리나요?
평소에는 근거가 쌓이지 않고, 시즌이 되어서야 한꺼번에 찾기 시작합니다. 위 양식대로 하려면 팀장마다 반년치 근거를 사람별로 정리해 와야 하는데, 실제로는 세 곳에서 막힙니다.
- 기억에 기댄 근거: 평가 시즌에 떠올리면 최근 몇 주의 일만 남습니다.
- 흩어진 기록: 근거가 메신저, 이슈 트래커, 문서 도구에 나뉘어 있어 팀장도 찾는 데 시간이 걸립니다.
- 팀마다 다른 형식: 어떤 팀장은 세 줄, 어떤 팀장은 세 쪽을 써 와서 같은 표에 놓고 비교하기 어렵습니다.
근거 시트가 같은 형식으로, 빠짐없이 모여야 보정 회의가 말솜씨가 아니라 근거로 돌아갑니다. 이 준비를 사람 손으로만 하면 시즌마다 같은 곳에서 멈춥니다.
CoSprint People은 보정 회의에서 무엇을 줄여 주나요?
CoSprint People은 팀이 이미 쓰는 업무 도구를 연결해, 평가 기간 전체의 기록을 회사가 정한 기준별로 모으고 기준마다 원문 근거와 링크를 붙입니다. 근거가 없는 기준은 빈칸으로 두고 면담에서 확인할 질문으로 넘깁니다. 모든 팀장의 근거 시트가 같은 형식으로 준비되는 셈입니다.
보정 화면에서는 기록이 뒷받침하는 등급 범위를 사람마다 먼저 보여 주고, 두 등급에 걸친 사람과 판단하지 못한 항목이 많은 사람만 따로 모읍니다. 팀이 달라도 같은 직무·레벨을 한 표로 보고, 회사 등급 비율과 지금 산정안을 나란히 비교할 수 있어요. 최종 등급은 평가권자가 정하고, 결정 사유를 메모로 남깁니다. 자세한 화면은 인사평가 등급·보정에 있습니다.
모든 회사에 맞지는 않습니다. 현장직이나 외근 영업처럼 일의 기록이 업무 도구에 거의 남지 않는 직무가 대부분이라면 모을 근거가 부족합니다. 이런 회사는 위의 안건 양식과 근거 칸이 있는 평가표로 운영하는 편이 맞습니다. AI 도입을 검토하라는 과제를 받았다면 AI 인사평가 도입 검토 보고서 양식도 함께 보세요.
자주 묻는 질문
캘리브레이션과 평가 보정은 다른 건가요?
같은 일을 가리키는 말입니다. 회사에 따라 캘리브레이션 미팅, 평가 조정 회의, 보정 회의라고 부르고, 1차 평가가 끝난 뒤 평가자들이 모여 등급을 맞추는 단계라는 점은 같습니다.
팀장이 두세 명뿐인 작은 회사도 보정 회의가 필요한가요?
필요합니다. 평가자가 적을수록 한 사람의 성향이 결과 전체에 미치는 몫이 커집니다. 대표와 팀장들이 한 시간 정도 모여 경계에 걸린 사람과 근거가 빈 항목만 함께 보는 것으로 시작해도 충분합니다.
회의가 끝난 뒤 임원이 등급을 바꾸면 어떻게 하나요?
막기보다 같은 규칙을 적용합니다. 회의 뒤에 바뀐 등급도 기록 양식에 한 줄로 남기고, 누가 어떤 근거로 바꿨는지 적습니다. 사유가 남지 않는 변경이 반복되면 팀장들이 다음 회의에서 근거를 준비할 이유가 사라집니다.
절대평가 회사도 보정 회의를 해야 하나요?
해야 합니다. 등급 비율이 없어도 팀장마다 '기대 이상'의 기준이 다르면 같은 일에 다른 등급이 붙습니다. 절대평가 회사의 보정 회의는 비율 확인을 빼고, 등급 정의를 같은 뜻으로 쓰고 있는지 확인하는 데 시간을 씁니다.
보정 회의 내용을 직원에게 공개해야 하나요?
회의 발언은 공개하지 않는 것이 일반적입니다. 다만 등급이 바뀐 직원에게는 어떤 기준과 사실로 결정했는지를 면담에서 설명해야 합니다. 평가 결과를 불이익 처분에 쓸 계획이라면 기록 범위와 설명 방식을 노무 전문가와 먼저 검토하세요.
CoSprint에서 보기
출처
- Scullen, Mount & Goff (2000), Understanding the latent structure of job performance ratings, Journal of Applied Psychology 85(6), 956–970 — 관리자 2,350명·2,142명 두 표본의 육성 목적 다면평가. 평가자 고유의 성향 62%, 53%, 평가받는 사람의 성과 21%, 25%
- Demeré, Sedatole & Woods (2019), The Role of Calibration Committees in Subjective Performance Evaluation Systems, Management Science 65(4), 1562–1585 — 다국적 기업 한 곳의 내부 자료. 조정 비율 25%, 평가자 간 일관성 향상·관대화 완화, 중심화 경향 심화
- Speer, Tenbrink & Schwendeman (2019), Let's Talk it Out: The Effects of Calibration Meetings on Performance Ratings, Human Performance 32(3-4), 107–128 — 현장 연구 두 건. 보정 후 등급이 다른 성과 지표와 더 높은 상관
- Bol, Braga de Aguiar & Lill (2025), Calibration in the Performance Evaluation Process, Human Resource Management 64(4), 1141–1159 — 한 회사의 직원 737명·평가자 114명. 평가자가 공유하는 정보를 고르고, 방어 부담이 적은 평가자가 조정을 덜 받음
- Bond (2025), Cut to the Curve: Underrecognition and Talent Loss from Forced Ranking in a Multinational Firm, Management Science — 상위 등급 비율 제한으로 등급이 내려간 직원의 자발적 퇴사 가능성이 최소 34% 높음
- 대법원 2021. 2. 25. 선고 2018다253680 판결 (국가법령정보센터 판례 원문)