K-CESA 글로벌역량 검사에 대한 차별적 기능문항 분석

An analysis of differential item functioning on the items of K-CESA global competency test

본 연구에서는 K-CESA 글로벌역량 검사 자료를 활용하여 차별적 기능문항 분석을 실시하고 그 함의를 탐색하였다. 이러한 분석은 성별, 학년별, 계열별, 학교유형별 등에 따른 문항의 차별적 기능을 살펴봄으로써 문항 제작 및 검토를 위한 시사점을 도출하려는 목적을 가진다. 전반적으로 글로벌역량 검사가 측정하는 구인이 세계사 관련 지식 및 암기 가능한 역량에 주로 영향을 받고 있음을 알 수 있었다. 차별적 기능문항 추출을 위하여 우도비 검정과 로지스틱 회귀분석 방법이 각각 사용되었으며 두 방법 모두에 의하여 차별적 기능문항으로 나타난 문항을 살펴본 결과, 집단 구분에 따라서 전체 30문항 중 5문항에서 14문항이 차별적 기능문항으로 나타났다. 이러한 문항들에 관하여 전문가 협의를 통한 심층적 분석을 시도하였다. 그 결과 여학생이 남학생에 비하여 세계사 지식과 관련하여 관심 분야에 좀 더 집중하는 경향이 있는 것으로 나타났다. 또한 계열별 분석에 있어서 문과학생이 이과학생에 비하여 좀 더 우수한 경향이 존재하였는데 이는 고교 재학 시 선택 과목으로 세계사 혹은 세계지리 관련 학습에 노출 경험이 더 많기 때문일 것으로 추정되었다.

In this study, we used the K-CESA global competency test data to conduct the differential functioning items analyses and to explore their implication. The purpose of this analysis is to find out the implications for making and reviewing the items by examining the differential functioning of the items according to sex, grade, school, and school type. Overall, it was found that the construct measured by current global competency tests was mainly influenced by knowledge and memory competence on world history and geography. For detecting differential item functioning, likelihood ratio test and logistic regression method were used respectively. As a result of differential item functioning analyses by both methods, out of the total 30 items, 5 to 14 items appeared to have differential item functioning. An in-depth analysis of these questions was conducted through expert consultation. As a result, it was found that female students tend to focus more on fields of interest related to world history and geography than male students. Also, there was a tendency that the students in the area of liberal arts were superior to the students in the natural science. This was presumed to be due to the fact that they could be more exposed to world history or geography as elective subjects at their high school lives.