• 시큐리티연구
• /
• 제42호
• /
• pp.37-57
• /
• 2015

본 연구의 목적은 무도수련만족 척도를 경호무도 수련자에게 적용할 수 있도록 Many-Facets Rasch 모형에 의한 문항적합성을 검증하는데 있다. 이를 위해 경호무도를 수련하고 있는 255명의 자료를 분석에 사용하였다. 또한 단일차원성 검증을 위해 AMOS 20.0 프로그램을 사용하였으며, 문항적합도 검증을 위해 Facets 3.61 프로그램을 활용하였다. 이에 따른 구체적인 연구 결과는 다음과 같다. 첫째, 단일차원성 검증결과 모형적합도, 신뢰도 및 표준화 ${\beta}$값 모두 적합한 것으로 나타났다. 둘째, 문항적합도를 분석한 결과 문항 1,2,3은 부적합, 문항 4,8,11,13,14번은 과적합문항인 것으로 나타났다. 또한 문항곤란도 분석결과 문항 1번이 가장 높은 곤란도를 보유한 것으로 나타났으며, 문항 7번이 가장 낮은 곤란도를 보유한 것으로 나타났다. 셋째, 국면에 따른 문항곤란도 및 반응차이검증 결과 여성 집단이 남성 집단에 비해 높은 곤란도를 나타내었으며, 문항적합도는 모두 적합한 것으로 나타났다. 경호무도 수련경력에 따른 문항곤란도 및 반응차이검증결과 수련경력에 따른 반응차이는 없는 것으로 나타났으나 4년이상~5년미만 수련자와 5년이상~6년미만 수련자에서 과적합 특징을 나타내었다. 학년에 따른 문항곤란도 및 반응차이검증 결과 1학년이 문항곤란도를 가장 높게 인식하고 있었으며 4학년은 문항곤란도를 가장 낮게 인식하고 있었다. 넷째, 응답범주분석 결과 6점 응답 범주는 적절하지 않은 것으로 나타났다.

• 한국어교육
• /
• 제28권1호
• /
• pp.173-196
• /
• 2017

Writing is a subjective and performative activity. Writing ability has multi-facets and compoundness. To understand the examinees's writing ability accurately and provide effective writing scores, raters first ought to have the competency regarding assessment. Therefore, this study is significant as a fundamental research about rater's characteristics on the TOPIK writing assessment. 150 scripts of the 47th TOPIK examinees were selected randomly, and were further rated independently by 20 raters. The many-facet Rasch model was used to generate individualized feedback reports on each rater's relative severity and consistency with respect to particular categories of the rating scale. This study was analyzed using the FACETS ver 3.71.4 program. Overfit and misfit raters showed many difficulties for noticing the difference between assessment factors and interpreting the criteria. Writing raters appear to have much confusion when interpreting the assessment criteria, and especially, overfit and misfit teachers interpret the criteria arbitrarily. The main reason of overfit and misfit is the confusion about assessment factors and criteria in finding basis for scoring. Therefore, there needs to be more training and research is needed for raters based on this type of writing assessment characteristics. This study is recognized significantly in that it collectively examined writing assessment characteristics of writing raters, and visually confirmed the assessment error aspects of writing assessment.