• 융합정보논문지
• /
• 제10권3호
• /
• pp.115-125
• /
• 2020

최근 사회에서 창의적 문제해결 역량을 갖춘 인재에 대한 요구가 증가하면서 문제중심학습은 교육현장에서 가장 보편적으로 활용되고 있는 새로운 교수법이다. 이러한 교수법 적용에 따른 학습 효과를 수업 현장에서 간편하고 정기적으로 측정할 수 있는 도구를 본 연구를 통해 개발하였다. 기존 문제중심학습 효과 측정 연구에 활용된 문항을 수집하고, 전문가 의견 수렴을 통해 도구 개발을 위한 22개 예비 문항을 구성하였다. 이 문항을 이용하여 문제중심학습을 적용한 교과목을 수강한 학생 124명을 대상으로 데이터를 수집하였다. 이후 Rasch 분석을 통해 타당도와 신뢰도를 검증하였다. 124명의 학생 중 11명이 부적합, 22개 예비 문항 중 1개 문항이 부적합 판정되어 제외하였다. 또한 본 도구 구성을 위한 최적 척도는 4점 척도로 확인되었으며, 대상자와 문항에 대한 분리 신뢰도는 우수한 수준으로 확인되었다. 본 연구를 통해 개발한 문제중심학습의 효과 측정도구가 교육 현장에서 학습효과 측정 및 교육의 질 관리를 위해 적극 활용되길 기대한다.

• 한국심리학회지 : 문화 및 사회문제
• /
• 제30권2호
• /
• pp.159-192
• /
• 2024

본 연구는 반응적-주도적 공격성 측정 도구인 RPQ (The reactive-proactive aggression questionnaire)를 국내에 타당화하는 것을 목적으로 한다. 원저자와의 상호협력을 통해 정확한 번안 과정을 거쳐 국내 일반인 510명을 대상으로 탐색적 요인분석, 탐색적 구조방정식 모형, 평정척도모형, 차별기능문항, 수렴타당도를 분석하였다. 본 연구 결과 첫째, RPQ의 요인구조는 이중적재가 나타난 한 문항을 삭제한 후 반응적 공격성과 주도적 공격성의 2요인으로 상정하였다. 둘째, Rasch 모형에 기반한 평정척도 분석 결과, 본 척도의 3점 리커트 척도는 적절한 것으로 나타났고, 문항적합도 검증을 통해 모든 문항이 적합도 기준을 충족하는 것으로 나타났다. 분리지수 및 분리 신뢰도는 주도적 공격성 요인이 다소 낮은 수준을 보였으나 전체적으로 피험자와 문항이 적절하게 변별되는 것으로 나타났다. 피험자x문항 분포 탐색 결과 반응적 공격성은 피험자의 능력수준과 문항난이도가 적절하게 대응하였으나, 주도적 공격성은 문항 난이도가 다소 높은 것으로 나타났다. 성별에 따라 다르게 기능할 수 있는 문항은 총 3문항으로 나타났으며, 수렴타당도 검증 결과 충동성 측정 도구인 한국판 BIS-11-R과는 낮은-중간 수준의 정적 상관관계를 보였다. 본 연구는 서구권과는 다른 한국의 문화적 특성을 고려한 타당화를 통해 공격성 척도인 RPQ가 국내에도 적합함을 입증하였으며 국내 일반인을 대상으로 반응적 공격성과 주도적 공격성 개념을 도입한 것에 의의를 지닌다.

• 영어어문교육
• /
• 제18권2호
• /
• pp.125-147
• /
• 2012

The primary goal of the study was to provide some preliminary validity evidence for the Vocabulary Grade Levels Test (Busan Metropolitan City Office of Education, 2009), which is designed to measure the receptive vocabulary knowledge of learners in L2. For the purpose of the current study, 327 participants at the elementary school participated in the study and were asked to take two different vocabulary tests. Namely, a Vocabulary Size Test (Nation, 2001) and a Vocabulary Grade Levels Test. The data were analyzed using correlation in order to discover the relationship between these two types of tests. Following this, the Rasch analysis was conducted to examine the reliability and validity of the measurement in question. The data analysis showed that both grade separation reliability and item separation reliability were high, indicating that the Vocabulary Grade Levels Test well discriminates learners with a wide range of proficiency levels. The findings of the study are discussed, along with further improvements in order to ascertain the validity of this particular vocabulary test.

• International Journal of Contents
• /
• 제15권3호
• /
• pp.1-6
• /
• 2019

The purpose of this study was to identify the psychometric properties of the vocational ability scale used in the 8th Panel Survey of Employment for the Disabled in Korea by using the Rasch model. The sample data was collected from 398 individuals with intellectual disabilities. Item fitness, item difficulty, the appropriateness of the rating scale, and the separation index of the vocational ability scale were evaluated. All 15 items show an appropriate fitness level. The analysis of item difficulty indicate that modifications are required. Specifically, the need for the addition of less difficult question items is identified. The use of a 5-point rating scale is shown to decrease the test difficulty in terms of clarity and readability when appropriate and a 4-point modification is also determined as appropriate. With respect to the outcomes of the analysis, the person separation reliability value and separation index are high, and the reliability of the items is also high.

• 한국과학교육학회지
• /
• 제40권3호
• /
• pp.253-269
• /
• 2020

본 연구는 2015 개정 과학과 교육과정에 제시된 성취기준에 기초하여 현대물리 개념지식에 대한 예비 물리교사의 이해를 진단할 수 있는 개념 진단지를 개발하고 타당도와 신뢰도를 확인하였다. Messick(1995)의 분류에 따른 5가지 타당도 중 검사내용에 기초한 타당도는 일련의 전문가 내용타당도 검사로 진행하여 확인한 후 24문항의 설문용 현대물리 개념 진단지를 구성하였다. 국내 15개 사범대학의 467명의 예비 물리교사에게 개발된 현대물리 개념 진단지를 적용하여 문항의 신뢰도와 Messick(1995)의 나머지 4가지 타당도를 확인하였다. 실제에 기초한 타당도는 Rasch 모형이 적용된 통계분석방법으로 문항적합도(MNSQ)를 확인한 결과, 23문항이 적합한 수준으로 나타났다. 이중 오타가 발생한 문항을 제외한 22문항에 대하여 내적구조에 기초한 타당도 분석을 하여 개발된 현대물리 개념 진단지의 일차원성을 확인하였다. 일반화에 기초한 타당도 확인 결과에 따르면 개발된 개념 진단지가 집단특성에 대해 독립적이라고 판단된다. 양자역학 수강 여부에 따른 검사점수의 t-검증 결과, 유의미한 차이가 나타났으며, 이를 외적준거에 기초한 타당도 확인으로 활용하였다. Cronbach alpha 및 Rasch 모형 분석에서의 피험자 신뢰도와 문항신뢰도 값은 검사자료가 적합한 수준의 신뢰도를 갖는다는 보여주었다. 또한 고전검사이론에 의한 문항분석 결과, 양호한 문항난이도를 보여주었으며 문항변별도는 두 문항이 준거값을 벗어났으나 다른 나머지 문항들은 양호한 값을 보여주었다. 양류상관계수는 한 문항을 제외한 나머지에 대해서 양호한 값을 나타내었다. KR-20과 Ferguson's delta 값 역시 검사지가 양호하다는 것을 보여주었다. 마지막으로 문항반응 이론에 의한 문항난이도(추정치)를 Rasch 모형 분석으로 추정하였으며, 이 값들은 피험자 집단 특성에 영향을 받지 않을 것으로 판단된다.

• 한국전문물리치료학회지
• /
• 제15권2호
• /
• pp.44-53
• /
• 2008

The purpose of this preliminary study was to develop a measurement for assessing risk factors for falling in community-dwelling elderly persons. Rasch analysis and principal component analysis were performed to examine whether items on the Activities-Specific Balance Confidence (ABC), assessing self-efficacy, and items on the Berg Balance Scale (BBS), assessing balance function, contribute jointly to a unidimensional construct in the elderly. A total of 35 elderly persons (4 men, 31 women) participated. In this study, each item of ABC (16 items) and BBS (14 items) was scored on a 5-point ordinal rating scale from 0 to 4. The initial Rasch and principal component analysis indicated that 3 of the ABC items and 2 of the BBS items were misfit for this study. These 5 items were excluded from further study. After combining ABC and BBS, Rasch and principal component analyses were examined and finally 23 items selected; 12 items from ABC, 11 items from BBS. The 23 combined ABC-BBC items were arranged in order of difficulty. The hardest item was 'walk outside on icy sidewalks' and the easiest item was 'pivot transfer'. Although structural calibration of each 5 rating scale categories was not ordered, the other three essential criteria of Linacre's optimal rating scale were satisfied. Overall, the ABC-BBS showed sound item psychometric properties. Each of the 5 rating scale categories appeared to distinctly identify subjects at different ability levels. The findings of this study support that the new ABC-BBS scale measure balance function and self-efficacy. It will be a clinically useful assessment of risk factors for falling in the elderly. However, the number of subjects was too small to generalize our results. Further study is needed to develop a new assessment considering more risk factors of falling in elderly.

• 중환자간호학회지
• /
• 제15권3호
• /
• pp.37-50
• /
• 2022

Purpose : This study aimed to examine the item characteristics of the Korean version of the intensive care experience questionnaire (K-ICEQ) using the Rasch analysis model of the item response theory. Methods : In this methodological study, the validity of the scale was examined, and a secondary analysis was conducted using cohort data of patients who were discharged from the intensive care units (ICU). Data from 891 patients who responded to the K-ICEQ upon ICU discharge were analyzed. The WINSTEP program was used to analyze item characteristics, including item difficulty, fit indices, appropriateness scale, and separation reliability. Results : The difficulty level of all 26 items of the K-ICEQ was appropriate, and the fit indices of the 25 items, except for item 18, were good. The 5-point scale of the K-ICEQ was not appropriate in the three subscales. The item separation reliability was good in all subscales, but did not meet the criteria in terms of respondents. Conclusion : The results of examining the item characteristics of the K-ICEQ revealed a good degree of difficulty, fitness, and item separation reliability. To increase the validity of the K-ICEQ, we suggest the rearrangement of the overall item order, modification of the item description of the "recall of experience" subscale, and reduction of the scale response level.

• 대한감각통합치료학회지
• /
• 제13권2호
• /
• pp.31-41
• /
• 2015

목적 : 본 연구의 목적은 만 3~5세 아동의 감각처리 문제를 선별할 수 있는 아동감각처리척도(Sensory Processing Scale for Children: SPS-C)를 개발하여 타당도를 검증하는 것이다. 연구방법 : 아동감각처리척도를 개발한 뒤, 만 3~5세 아동 138명의 보호자를 대상으로 평가를 시행하였다. 평가도구의 구성타당도를 검증하기 위해 수집된 자료를 대상으로 라쉬분석을 통해 단일차원모형의 적합성과 평정척도의 적합성을 분석하였다. 결과 : 라쉬분석 결과 총 56개 항목 중 6개 항목(10.7%)이 부적합한 것으로 나타났다. 또한 평정척도 분석 결과 5점 척도보다 3점 척도가 더 적합한 것으로 나타났다. 결론 : 본 연구를 통해 아동감각처리척도의 구성타당도를 검증하였으며, 추후 연구에서는 최종적으로 수정 보완된 한국형 감각처리척도를 대상으로 신뢰도와 기타 타당도 검증을 하여야 할 것이다.

• 한국콘텐츠학회논문지
• /
• 제15권10호
• /
• pp.354-361
• /
• 2015

본 연구에서는 라쉬분석을 통하여 한글판 회복평가척도의 문항적합도와 난이도, 평정척도 적합도을 검증함으로써 이 평가도구의 국내 사용을 위한 기초자료를 제시하고자 한다. 이 연구는 18세 이상의 만성 조현병 환자 60명을 대상으로 실시하였다. 자료분석은 라쉬분석을 통하여 항목의 적합도와 항목 난이도, 평정척도 적합도 분석을 실시하였다. 연구 결과 60명의 대상자 중 1명이 부적합 대상자로 판정되었으며, 24개 항목 중 3개 항목이 부적합 판정을 받았다. 부적합 항목은 "나는 지금 가지고 있는 목표를 성취할 수 있을 것이라고 믿는다." "비록 내가 나를 돌보지 못할 때에도, 다른 사람들이 나를 돌봐준다."," 내가 가진 병에 대처하는 것이 더 이상 내 삶의 주요 관심사는 아니다."였다. 항목의 난이도에서 가장 어려운 항목은 "나는 내 삶에서 일어나는 일을 다룰 수 있다" 이고, 가장 쉬운 항목은 "결국에는 잘 될 것이다"로 나타났다. 회복평가척도의 평정척도(1~5)는 적합한 척도 범주로 분석되었으며, 항목에 대한 신뢰도는 .70, 대상자에 대한 신뢰도는 .94로 분석되었다. 본 연구를 통해 한글판 회복평가척도의 타당도와 평정척도 적합도를 확인하였다. 그 결과 5점 평정척도는 적합한 것으로 나타났으나, 일부 부적합 항목이 발견되어 앞으로 국내 타당도 확립과 준거제시를 위한 연구가 추후 이루어져야 할 것이다.

• 과학교육연구지
• /
• 제41권3호
• /
• pp.382-404
• /
• 2017

이 연구에서는 2015년 국가수준 학업성취도 평가(NAEA)의 서답형 문항을 이용하여 중학교 과학 교과의 8개 핵심 개념에 대한 학습발달과정을 탐색하고자 하였다. 이를 위해 2015년 실시된 NAEA 서답형 8개 문항에 대한 중학교 3학년 7,390명의 응답 결과를 전산으로 입력하고 입력된 답안을 분석하여 수준별로 유형화하는 과정을 거쳤다. 이 과정을 마친 후 각 평가 구인별로 5개 수준을 설정하여 구인구성도를 작성하였다. 이 연구에서의 구인구성도는 발달 기반의 루브릭 형식으로 작성되었는데, 전체 학생들의 답안에 대해 수준을 부여하는 준거로 활용되었다. 또한, 평가 결과로 얻은 학생들의 점수를 평가 구인에 대한 성취 수준과 연결하기 위하여 통계적 해석으로 응답자의 점수나 성취 정도를 측정하는 Rasch 모델을 적용하였다. 마지막으로, Rasch 모델 적용 결과를 반영하여 구인구성도를 수정한 예비 학습발달과정을 작성하였다. 이 연구는 NAEA의 서답형 문항을 활용하여 학습발달과정 개발 가능성을 탐색하였다는 데 의의가 있다. 하지만, 이 연구에서 작성된 예비 학습발달과정이 개별 학생들 대상으로 종적으로 추적한 것이 아니므로 여전히 가설적이며 추론적이다. 그러므로 반복적인 연구 과정을 통해 지속적으로 수정 및 보완될 필요가 있다.