구성적 선다형 검사에서 선다형과 단답형의 문항 특성 비교

A Comparison of the Short-answer and the Multiple-choice Items in the Constructive Multiple-choice Test

학생평가에서 주로 활용되는 문항형식은 선다형과 단답형이라 할 수 있다. 이 연구에서는 컴퓨터를 이용한 새로운 검사방식인 구성적 선다형 방식을 이용하여 수집된 자료로부터, 두 가지 문항 형식이 나타내는 문항 특성(난이도와 변별도) 및 문항/검사 정보함수를 비교하였다. 초등학생과 대학생을 대상으로 한 두 개의 연구에서, 동일한 발문(identical stem)에 대해 단답형과 선다형으로 반응하게 한 결과, 문항 형식에 따라 문항의 난이도와 변별도에 차이가 나타났으며, 문항 및 검사 정보량에서 대별되는 결과가 나타났다. 선다형 문항과 비교하여 단답형 문항에서 문항 난이도와 변별도가 높아지며, 문항 및 검사 전체에서 정보량이 단답형 문항에서 더 커졌다. 이에 반해 선다형 문항은 낮은 능력수준의 피험자를 변별하는데 상대적으로 강점을 보였다.

The short-answer and the multiple-choice items have been the most popular item formats in student assessments. In this study, we made comparisons of item characteristics (i.e., difficulty and discrimination) and item/test information functions between the two item formats by using a new testing system called the Constructive Multiple-choice Test. Assessments using the Constructive Multiple-choice Tests for elementary and undergraduate students showed that there were significant differences between the short-answer and the multiple-choice items in terms of item difficulty /discrimination and item/test information. That is, the short-answer items tended to be more difficult and discriminating and to have more information in general, whereas the multiple-choice items were somewhat more useful in distinguishing lower ability examinees. Limitations of the current study and suggestions for further research were discussed.