선택형 검사는 피험자가 추측에 의하여 응답할 수 있는 단점을 지니고 있으며, 추측에 의한 응답은 피험자 능력추정의 오차를 증가시킬 뿐 아니라 검사의 양호도에도 영향을 미친다. 이 연구에서는 추측에 의한 응답을 줄이기 위해 ‘잘 모르겠음’이라는 답지를 포함하는 것과 오답과 ‘잘 모르겠음’이라는 응답에 대해 차별적으로 점수를 적용하는 방안이 검사의 측정학적 특성에 어떠한 영향을 미치는지 차별기능검사와 피험자 응답 적합도 측면에서 살펴보고자 하였다.
이를 위해 아무런 처치도 가하지 않은 집단과 ‘잘 모르겠음’이라는 답지를 포함한 집단, 추측한 응답에 대해 차별점수를 적용한다고 공지한 집단으로 구분하여 검사를 시행하였다. 추측에 대한 차별점수화의 영향을 알아보기 위하여 오답과 ‘잘 모르겠음’ 답지에 대한 차별점수화를 공지한 집단의 경우 자료처리에 있어서는 차별점수를 적용하는 조건과 적용하지 않는 조건으로 구분하였다. 분석결과, 4가지 조건 중 ‘잘 모르겠음’이라는 답지를 포함하고 있는 조건에서 피험자 응답 적합도가 보다 양호한 것으로 나타났으며, 동일한 내용을 측정하는 검사라 할지라도 추측에 의한 응답을 고려하지 않는 검사 유형과 비교할 때 ‘잘 모르겠음’이라는 답지를 포함하거나 ‘잘 모르겠음’이라는 답지를 포함하면서 추측에 대한 차별점수화를 예고할 경우 검사가 달리 기능하는 것으로 분석되었다.The primary purpose of this study is to investigate the effects of ‘don't know’ response option and differential scoring for ‘don't know’ response on DTF and person fit, and to detect the methods to reduce the effect of guessing in multiple-choice test.
Three forms of each test unit were prepared. The group 1 took forms containing items with five responses and the group 2 took forms which had an additional response of I don't know, while the group 3 took forms with ‘don't know’ response option and information of weight on the choice of ‘don't know’ option. The group 3 data is processed to study the effect on weight by two methods to weight of ‘1/number of alternative’ for ‘don't know’ response and not to.
Person fit shows good result in the case of addition of a ‘don't know’ option. Also, even though tests are constructed by the same items, there are the effects of ‘don't know’ response option and the information of differential scoring for ‘don't know’ response and tests differently function.