초6-중3 학업성취도 검사의 IRT 수직척도 개발을 위한 탐색 연구

An exploratory study on IRT vertical scaling for grade 6 through grade 9 educational achievement tests

본 연구의 주된 목적은, 국가수준 학업성취도 평가 결과를 이용하여 여러 해에 걸친 학생 및 학교의 변화나 성장을 파악하고자 할 때 요구되는, 종단적 수직척도를 마련하기 위하여 문항반응이론에 기반한 측정학적 검토를 실시하는 것이다. 이를 위하여 우선 수직척도화 개념에 대한 명확한 이해를 도모하였고, 문항반응이론을 사용하여 수직척도를 구성하고자 할 때 결정해야 할 제반 사항들에 대해서 고찰하였다. 국어와 수학 두 과목에 대하여 초등학교 6학년부터 중학교 3학년까지의 수직척도 체계를 탐색적으로 개발한 뒤, 학년별 척도점수 분포와 함께 학년이 올라감에 따른 평균 및 표준편차의 변화를 살펴보았다. 또한 인접학년 공통문항의 총점을 이용하여 수직 척도점수 체계에 대한 평가를 시도하였다. 마지막으로, 산출된 수직척도를 활용할 때 유의할 점과 함께 수직척도 개발 연구에 있어서의 제한점 및 향후 연구 방향에 대해서 논의하였다.

A vertical scale could be used to monitor students’ and schools’ growth over years. This study was to investigate how IRT vertical scaling could be developed to establish such longitudinal scales of Korean and mathematics achievement tests for grade 6 through grade 9. To construct those scales, first, the accurate concept of vertical scaling was to be clarified. Second, for the purpose of applying IRT as the scaling method, the item response theory models, the item parameter calibration methods, and the student proficiency estimation approaches were discussed and compared. After constructing various types of vertical scales, the fluctuation of means and standard deviations over grades were investigated. And, the scaling results could be partially evaluated against the total scores of common items used in each adjacent grades’ tests. Discussions of the findings were provided, followed by practical implications, description of limitations, and directions of future studies.