Earticle

초록

영어

This study aimed to evaluate and compare the usefulness of the three filtering methods when test speededness existed. To accomplish the goal, a 50-item verbal analogy test was constructed and administered to two groups of middle school students. The two groups were tested under different time conditions, that is, almost no time-limit condition as in a power testing condition(PT) and a strict time-limit condition(ST). To evaluate the usefulness of four filtering methods on speeded tests, first of all, three filtering methods of test speededness using the most speeded data set(ST test) were analysed. Three Methods were (1) Two-Class Mixture Rasch Models using Bayesian Estimation method(Two-Class MRM-BaE method), (2) Modified Bejar Person-Index(MBPI method), and (3) the filtering method of Item Response(IR method). As there was a need to set up the criteria for MBPI method and R method suggested this study, the Kappa value between MBPI method and Two-Class MRM-BaE method was analysed. The Kappa value between IR method and Two-Class MRM-BaE method was analysed. As a result, through 3 filtering methods applied to ST test which was the most speeded, speeded group and nonspeeded group were classified, the portions of speeded group were 10.1%～58.8% of the 1,122 participants. MBPI and IR methods of the highest Kappa values were the 80%ile method and the minimum agreement portion of 60% method(MAP of 60% method).

한국어

본 연구의 목적은 첫째, 검사속도성 영향이 나타난 검사자료에서 선행연구를 통해 검사속도성 여과모형으로 제안된 수리적 모형인 Two-Class Mixture Rasch 모형의 검사속도성 여과효과를 분석하는 것이다. 다음으로는 본 연구에서 제안된 검사속도성 탐지지수인 수정된 Bejar 지수 그리고 문항반응 여과방법을 적용한 후, 이 방법의 준거점수를 선정하는 것이다. 중학교 2학년생 2,269명을 대상으로 언어유추검사를 충분한 검사시간 조건, 제한된 검사시간 조건에서 시행하였다. 세 가지 여과방법을 순차적으로 수행한 결과, Two-Class Mixture Rasch 모형에 의해 속도화 집단과 비속도화 집단의 분류비율을 얻었다. 수정된 Bejar 지수 방법과 문항반응 여과방법의 경우, Two-Class Mixture Rasch 모형에 의한 결과와 일치도가 가장 높은 준거점수를 선정하여 각각 속도화 집단과 비속도화 집단의 분류비율을 얻었다. 둘째, 검사속도성 여과모형의 효과분석을 위해 단일차원성 가정을 검증한 결과, T wo-Class Mixture Rasch 모형, 수정된 Bejar 지수에 의해 일차원성 가정이 만족되었다. 그러나 문항반응 여과방법은 여전히 가정을 만족시키지 못했다. 본 연구 결과, 속도화된 자료를 여과하는 방법이 다양하게 시도되었고, 단일차원성 가정 맥락에서 Two-Class Mixture Rasch 모형과 수정된 Bejar 지수의 검사속도성 여과효과가 있음을 확인하였다.

목차

《요약》
 Ⅰ. 서론
 Ⅱ. 검사속도성 여과방법
  1. Two-Class Mixture Rasch 모형
  2. Bejar의 수검자 지수
  3. 문항반응 여과방법
 Ⅲ. 연구방법
  1. 연구대상
  2. 측정도구
  3. 연구절차
  4. 분석절차
 Ⅳ. 연구결과
  1. 검사속도성 여과방법 수행
  2. 수검자 여과방법과 문항반응 여과방법의 준거점수 선정
  3. 일차원성 검증 결과
 Ⅴ. 논의 및 제언
 [참고문헌]
 ABSTRACT

키워드

저자

• 이채희 [ Lee, Che-hee | 한국교육과정평가원 ] 교신저자

참고문헌

발행기관

간행물

표지보기 관심저널 등록

• 간행물명

  교육종합연구 [The Journal of Educational Research]

• 간기

  계간

• pISSN

  1738-351X

• 수록기간

  2003~2021

• 십진분류

  KDC 370 DDC 370