16.27 스크럼 마스터의 핵심 성과 지표(KPI)와 정량적 평가 방법

1. 스크럼 마스터 성과 측정의 과제

스크럼 마스터의 성과를 정량적으로 측정하는 것은 역할의 촉진적·간접적 성격으로 인하여 고유한 어려움을 수반한다. 스크럼 마스터의 가치는 주로 팀의 효과성 향상, 조직적 장애물의 해소, 그리고 프로세스의 개선이라는 간접적 성과를 통하여 발현되며, 이를 개인의 기여분으로 분리하여 측정하기 곤란하다.

2. 핵심 성과 지표

팀 효과성 지표이다. 팀 속도(Velocity)의 추세적 변화, 스프린트 약속 달성률(Sprint Commitment Rate), 그리고 팀의 예측 가능성(Predictability)이 팀 효과성의 간접 지표이다. 이 지표들은 스크럼 마스터 개인의 성과가 아닌 팀 전체의 성과를 반영하므로, 스크럼 마스터의 촉진적 기여도를 추론하는 간접 지표로 활용된다.

프로세스 품질 지표이다. 스크럼 이벤트의 정기적 개최 여부, 이벤트의 시간 제한 준수율, 그리고 회고에서 도출된 개선 행동의 이행률이 프로세스 운영의 질을 측정한다.

장애물 관리 지표이다. 식별된 장애물의 수, 해결된 장애물의 수, 장애물의 평균 해결 시간, 그리고 에스컬레이션 빈도가 장애물 관리의 효과성을 측정한다.

팀 만족도 지표이다. 정기적 팀 만족도 설문(팀 사기, 협업 품질, 프로세스 만족도)의 추세적 변화가 스크럼 마스터의 서번트 리더십 효과성을 간접적으로 측정한다.

조직 기여 지표이다. 애자일 성숙도 진단의 추세적 변화, 다른 팀에 대한 코칭 활동, 그리고 조직 수준 개선 제안의 수와 채택률이 조직적 기여를 측정한다.

3. 정량적 평가의 주의 사항

스크럼 마스터의 성과 평가에서 Goodhart의 법칙(“측정이 목표가 되면 좋은 측정이 되기를 멈춘다”)의 위험에 유의하여야 한다. 특정 지표의 최적화가 본래 목적(팀 효과성 향상)을 왜곡하지 않도록, 복수의 지표를 균형 있게 활용하고 정성적 평가를 병행하여야 한다. 특히 팀 속도를 스크럼 마스터의 개인 성과 지표로 활용하는 것은 속도의 인위적 부풀리기(Velocity Inflation)를 유발할 수 있으므로 경계하여야 한다.