인사평가 타당성분석을 위한 방법론적 연구

An approach for the validity analysis of performance appraisal in Korea

  공정성이 중요시되는 인사평가에서는 개인의 공헌도를 차별화하여 정확하게 반영하는 것이 매우 중요하다. 이를 위해서는 개인의 공헌도를 명확히 측정(measurement)하는 것이 선행되어야 함에도 불구하고 한국기업의 인사평가에서는 상대적으로 복잡한 측정이론(measurement theory)과 개념타당성 (construct validity)에 대한 접근방법론의 어려움으로 인해 측정과 타당성에 대한 연구가 부족한 현실이다. 본 연구는 인사평가에 대한 연구가 측정과 타당성확보 차원으로의 발전을 위해 인사평가의 개념타당성에 대한 방법론을 연구하였다. 개념타당성확보를 위한 통계적 방법론들을 검토하여 기업의 인사평가에 유용한 분석방법들을 살펴보고 이를 통해 평가관리에 적용될 수 있는 학문적이면서 실용적인 시사점을 찾아보았다.   본 연구에서는 먼저 측정의 원리와 신뢰성과 타당성의 개념을 살펴보았다. 이를 토대로 인사 평가에서의 개념타당성을 분석할 수 있는 통계적 방법론들을 고찰해 보았다. Campbell and Fis-ke(1959)의 다속성-다측정(multitrait-multimethod)방법을 시작으로, 요인분석(factor analysis), 확인적 요인분석(confirmatory factor analysis), DP(direct product)모형, CU(correlated uniquen-ss)모형의 기본 체계와 각 방법들의 가정들을 검토하였다. 각 방법론들의 유용성과 한계점들을 분석하여 개념타당성 방법론들에 대하여 평가하였다. 방법론들에 대한 평가와 한국기업의 인사평가의 현실과 상황을 근거로 인사평가 타당성 접근방안을 3가지로 제안하였다.   본 연구는 실증적이기 보다는 방법론 고찰과 접근방안의 제안의 성격을 가진 연구이기 때문에 본 연구를 기초로 향후 평가타당성에 대한 연구들이 많이 나오기를 기대한다.

  The accurate measurement of individual contribution to organization is very important in performance appraisal that needs to guarantee the fairness. Although performance appraisal system should measure job performance accurately, not only Korean companies but also researchers did not consider the performance measurement and construct validity the prime factor of performance management. This phenomenon may be caused by the context that measurement theory is complicated and construct validity approach is difficult in Korea. Therefore, a new study is needed to develop the level of performance appraisal, which plays a key role in human resource management.   The purpose of this study is the methodological proposal of construct validity analysis in performance appraisal in Korea. This study reviewed the analytic and statistic approach for construct validity and found academic and practical implication.   The classical test theory is explained to define reliability and validity. The systematic variance, such as method variance, is the key of construct validity. This study surveyed statistic methods and focused on the method variance which is critical in validity analysis. The methods surveyed are as follows. First, MTMM (multitrait-multimethod), which Campbell and Fiske in 1959 proposed, is reviewed. Next, this study surveyed assumption and limitation of many analytic methods such as EFA (exploratory factor analysis), CFA (confirmatory factor analysis), DP (direct product), and CU (correlated uniqueness). This study evaluated each method by analyzing usefulness and limitation.   This research proposed that the CFA (confirmatory factor analysis) approach is the most useful approach in construct validity analysis. The CFA would be more powerful if it can select the independent measurement method which is the critical theoretical assumption in CFA. The independence can be more guaranteed by MTMM data model based on raters (ex, multi-source feedback) rather than on rating formats. Moreover, the proposal of this research recommended the time (appraisal year) as the measurement method. The appraisal time for measurement method of MTMM model would improve the degree of method independence.   In conclusion, if HR manager try to get prerequisites and to adapt the construct validity approach proposed in this research, the effectiveness of performance appraisal in Korea would be improved. The researches on the measurement perspective of performance appraisal can make performance appraisal practice in Korea more systematic and scientific.