• 한국인지과학회:학술대회논문집
• /
• 한국인지과학회 2002년도 춘계학술대회
• /
• pp.3-8
• /
• 2002

대규모 수험자를 대상으로 하는 경우, CBT 방식은 PBT 방식에 비해 비용이나 처리 방법에 있어 효율적이라는 장점을 갖고 있다. 하지만, CBT 평가가 제대로 운영되려면 많은 문항으로 구성된 대규모의 문제 은행이 있어야 하며, 기 구축된 문항은 적합성과 공정성이 반드시 보장되어야 한다. 이에 본 연구는 4,000여 명 이상의 수험자를 대상으로 8000문제가 넘는 문제 은행이 구축되어 실제 CBT 시스템을 개발·운영하고 있는 P 대학교 CBLT 테스트 시스템의 문항들을 분석할 방법을 제안한다. 연구 결과 CBLT 테스트 시스템의 문제 은행의 개별 문항들이 출제자 1인의 주관적 판단에 달려있어 문항에 대한 질 관리가 어렵다는 문제점을 해결하기 위해서는 고전검사이론이 적합하다고 판단된다. 그러나 매 시험이 동질한 문항 세트로 구성되기 위해서는 문항에 대한 충분하고 객관적인 자료가 절대적으로 필요하다. 이를 위해서는 CBLT 테스트 시스템과 같이 응답자 수가 2∼300여 명 전후이며, 40문항의 문항 세트에 대한 분석은 2모수 정도가 적당하다고 판단된다.

• 정보처리학회논문지:컴퓨터 및 통신 시스템
• /
• 제12권10호
• /
• pp.291-298
• /
• 2023

본 논문에서는 정보·컴퓨터 표시과목의 임용시험에서 프로그래밍 문항이 프로그래밍 능력을 겸비한 교사 선발에 적합한지 연구하였다. 최근 5년 동안의 문항을 분석한 결과, 프로그래밍 문항의 평균 배점이 교과내용학 총점의 38%(20.8점)로 높게 나타났다. 기출문항에서 프로그래밍 문항의 배점 비중이 높은 과목은 프로그래밍과 자료구조로 확인되었으며, 이들의 평가영역별 배점분포를 분석한 결과 각각 0%~47%, 0%~53%로 영역별 편차가 큰 것으로 나타났다. 본 논문에서는 프로그래밍 문항이 교육 현장에서 요구하는 교사 선발에 적합한지 교사 31명을 대상으로 설문조사를 실시하였다. 임용시험의 프로그래밍 문항에서 평가할 내용에 대한 응답으로 컴퓨팅 사고력이 58%로 가장 높게 나타났다. 문항의 적합도에 대한 응답에서 문제해결력이 5점 척도 기준에서 2.84로 가장 높았으나 전반적으로 적합도가 낮은 것으로 나타났다. 프로그래밍 문항 출제를 위해 적합한 언어로 C언어와 파이썬의 응답이 각각 55%, 45%로 나타났다. 이 결과에서 교사들은 기존의 C언어 외에 파이썬 선호도가 매우 높은 것을 확인하였다. 본 연구에서는 이러한 연구결과를 바탕으로 프로그래밍 문항 출제에 대한 개선방안을 제안하였다.

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2001년도 춘계학술발표논문집
• /
• pp.403-406
• /
• 2001

문제은행 시스템은 피험자의 조건에 따라 데이터베이스에서 문항을 추출하여 가상공간에서 평가를 수행한다. 가상 공간에서의 평가는 피험자에게 적용하는 경우 출제 빈도에 따라 운항의 난이도 및 변별력에 영향을 주게 된다 출제 빈도에 따라 난이도나 변별력이 낮아지는 문항은 출제를 제한하는 기준이 필요하다. 본 논문에서는 문항 사후 난이도와 문항 변별도를 기반으로 하여, 문항 차분 난이도를 주기적으로 측정하고 난이도 차이가 일정 수준 이상이 되는 문항에 대해 출제를 제한하는 방안과 전체 피험자에 대한 운항의 변별력을 측정하러 변별력이 떨어지는 문항을 출제자에게 문항을 수정하게 하거나 삭제하도록 하는 방안들 제안한다.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제52권2호
• /
• pp.231-245
• /
• 2013

MTEBI는 미국에서 초등 예비 교사들의 수학 교수 효능감을 측정하는데 자주 이용되는 척도이다. 이 연구의 목적은 MTEBI를 한국의 중등 예비 교사들에게 사용하는 것이 적합한지를 탐색하는 것이었다. 이를 위하여, 미국에 있는 대학원에 다니며 영어와 국어 둘 다 말할 수 있는 박사 학생 두 명이 MTEBI를 브리슬린의 이론대로 국문으로 번역하였고, 그 뒤에 한국에 있는 다수의 수학 교사 교육자들이 번역된 척도를 면밀하게 검토하였다. 한글판 척도를 먼저 작은 표본에서 초벌 실험하였는데, 두 개 문항이 도구의 신뢰도와 타당도를 현저하게 떨어뜨렸다. 본 연구에서는 이 두 개의 유용하지 못한 문항을 대신할 두 개 문항을 더한 23개 문항으로 구성된 척도에 대하여 정규성, 신뢰도, 요인 타당도 등을 658명의 표본에서 검사하였다. 초벌 연구에서 발견된 두 개의 유효하지 않는 문항은 본 연구에서도 역시 그와 같아서, 그 두 문항은 척도에서 제거되었다. 최종적으로 얻어진 21 문항 척도는 한국의 예비 수학 교사들의 수학 교수 효능감을 측정하는데 적합한 척도이다. 앞으로, MTEBI 한글판을 이용하여 한국에서 교사 효능감에 대한 연구가 활발하게 일어나기를 기대한다.

• 재활복지
• /
• 제20권4호
• /
• pp.135-156
• /
• 2016

이 연구의 목적은 아동기 자폐증 평정척도(CARS)에 대한 평정자의 타당한 평가가 가능토록, Rasch 평정척도모형을 적용하여 문항의 적합성과 난이도를 검증하는 데에 있다. 이를 위해 CARS 평정이 신뢰롭다고 판단된 발달장애인 238명의 자료를 분석하였고, 이때 CARS의 평정은 장애인복지관 치료사에게 교육을 받은 부모가 기입하도록 하였다. 이 연구에서 설정한 연구문제를 검증하기 위해 Rasch 평정척도모형을 적용하였고, Rasch 모형 적용을 위한 일차원성 가정은 PCAR 검증을 통해서, 문항의 적합성과 난이도는 jMetrik 4.03 프로그램을 통하여 추정하였다. 그 결과, 첫째, CARS의 문항 응답범주는 문제가 있는 것으로 나타나, 기존 7점 범주 대신 5점 범주로 수정이 필요하다. 둘째, CARS의 문항 적합도를 살펴본 결과, 집단에 따라 부적합 혹은 과적합한 문항이 존재하였다. 특히 자폐증 진단 대상자 통합 집단에서 Q11 문항만이 부적합하게 나타나, CARS 평정을 위한 교육을 보다 체계적으로 수행할 필요가 있다. 셋째, CARS 문항에 대한 개인 속성점수와 난이도를 비교한 결과, Q2, Q3, Q10, Q11 문항에 대한 개념적 정의를 보다 세부적으로 구분할 필요성이 있다. 넷째, CARS 문항에 대한 난이도를 살펴본 결과, 평정자인 부모가 지각하는 자폐증 집단의 가장 심대한 문제는 언어적 의사소통으로 나타났다.

• 재활복지
• /
• 제21권2호
• /
• pp.169-190
• /
• 2017

이 연구의 목적은 스포츠수행전략(TOPS) 척도를 지체장애 엘리트선수에게 적용이 가능토록, Rasch 평정척도모형을 적용하여 문항의 적합성을 검증하는 데에 있다. 이를 위해 지체장애 엘리트선수 215명을 대상으로 5요인 24문항으로 구성되어있는 TOPS 척도에 응답토록 하였고, 일차원성 가정은 PCAR 검증을 통해서, 문항의 적합성은 WINSTEPS 3.65 프로그램을 통하여 검증하였다. 그 결과, 첫째, 문항의 응답범주는 문제가 있는 것으로 나타나, 기존 5점 범주 대신 3점 범주로 수정이 필요하다. 둘째, 문항적합성을 분석한 결과 21문항은 적합한 것으로 나타났지만, 3문항은 부적합한 것으로 나타났다. 셋째, TOPS 척도의 문항 신뢰도는 수용이 가능했지만, 응답자 신뢰도는 낮게 나타나, 문항 곤란도를 고려한 문항 순서의 조정이 필요하였다. 넷째, 개인 속성점수와 곤란도를 Item-Person Map을 통해 비교한 결과, 혼잣말 요인을 제외한 나머지 요인들에서 개인 속성점수 분포에 비해 문항 곤란도 분포가 편향되어 있는 것으로 나타내었다. 따라서 후속 연구에서 지체장애 엘리트선수의 TOPS를 적용하기 위해서는 문항의 배열을 곤란도가 낮은 문항에서 높은 문항 순으로 조정하고, 응답범주는 3점 범주로 설정, 아울러 곤란도를 고려한 추가문항을 개발하는 것이 타당한 결과를 산출할 수 있을 것이다.

• Journal of the Korean Data and Information Science Society
• /
• 제24권6호
• /
• pp.1319-1329
• /
• 2013

이 연구는 Rasch 모형을 적용하여 아마추어 골프 선수들에게 적합한 코치-선수와의 관계 척도를 개발하고 타당화시키는데 목적이 있다. 코치-선수 관계 척도는 Kim과 Park (2008)이 개발한 한국판 척도를 검사내용에 기초한 증거를 토대로 수정 (11문항, 7척도)하여 아마추어 골프 선수 217명 (중학교, 고등학교, 대학교)에게 조사하였다. 그리고 WINSTEPS 프로그램을 이용하여 Rasch 모형의 기본가정인 일차원성을 검증 (주성분 분석)하였으며, 응답범주에 적절성은 단계조정값 (step calibration)을 통해 규명하였다. 이때 적합도 지수 (infit, outfit)를 통해 문항별 적합도를 검증하였으며, 골프경력 (10년미만, 10년이상)에 따라 차별기능문항을 추정하였다. 문항별로 추정되는 적합지수가 1.30 이상을 부적합하게 판단하였고, 분석에 모든 유의수준을.05로 설정하였다. 분석결과, Rasch 측정모형에 의해 설명되는 관찰분산이 20% 이상 (33.7%)으로 나타나 11문항의 일차원성 가정은 만족하였다. 그리고 응답범주 (7척도)를 단계조정값으로 분석한 결과에서 부적합하게 나타나 5점 척도로 재점수화하여 재분석한 결과에서 적합하게 나타났다. 특히 체계화된 응답범주 (5척도)를 이용하여 문항의 적합도를 추정한 결과, 상보성 요인에서 문항 10 (나는 최선을 다할 준비가 되어 있다)과 문항 11 (나는 호의적인 자세를 취한다)이 부적합 문항으로 나타났고 골프경력에 따라 차별기능문항 추정결과에서는 상보성 요인인 문항 11이 경력에 따라 비균일적으로 차별화되는 것으로 나타났다. 따라서 부적합하고 차별되는 두 문항을 제거하여 아마추어 골프 선수에게 적합한 코치-선수 관계 척도는 9문항에 5점 척도가 타당한 것으로 규명되었다.

• 동서간호학연구지
• /
• 제14권1호
• /
• pp.78-86
• /
• 2008

본 연구는 여대생의 건강증진행위를 설명하기 위하여, 문헌고찰을 통해 가설적 모형을 도출하고, 여대생을 대상으로 건강증진행위를 횡단적으로 조사하여 모형의 적합성과 모형에서 제시된 가설을 검증하는 서술적 상관관계 연구이다. 연구에 사용된 변수는 건강증진행위와 관련된 선행 문헌의 고찰을 근거로 선정되었으며, 총 280명의 자료가 최종 분석에 이용되었다. 설문지는 Pender의 건강증진모형을 기초로 하여 개발하였으며, 조정요인 5문항, 건강상태 지각 3문항, 건강 통제위 4문항, 자아 존중감 5문항, 건강증진 행위 24문항의 총 41문항으로 구성하여 사용하였다. 개발된 항목에 대하여 간호대학생들을 대상으로 사전 조사를 실시하여 최종적인 설문지를 완성하였다. 본 연구모형에 대한 구성개념의 파악을 위해서 탐색적 요인분석을 실시하였고, 측정항목에 대한 요인별 단일 차원성 확인 및 통계적 검정을 위해 확인적 요인분석을 실시하였다. 연구의 가설검증을 위해 공변량 구조분석을 실시하였다. 모형의 적합도는 카이제곱은 244.04(자유도=121, p<0.001), GFI=0.91, CFI=0.97, NNFI=0.96, RMSR= 0.022으로 나타났다. 분석결과 여대생의 자아존중감과 내적통제위는 건강상태지각 및 건강증진행위에 유의한 영향을 미치는 요인으로 확인되었으며, 여대생의 건강상태지각은 건강증진행위에 유의한 영향을 미치는 것으로 나타났다.

• 가정과삶의질연구
• /
• 제13권1호
• /
• pp.145-156
• /
• 1995

본 연구의 목적은 우리나라 가족 연구와 가족생활교육 및 가족상담 장면에서 활용될 수 있는 가족의 건강도 척도를 개발하는 것이다. 선행연구 및 관련 척도 고찰을 통하여 하위 요인 및 문항을 구성하였고, 문항의 적합도와 안면 타당도 검증 과정을 거쳐 예비조사 도구 100문항이 구성되었다. 가족생활주기별로 344명의 어머니를 대상으로 하였으며, 문항양호도를 파악하기 위하여 X^2$ 값과 Cramer의 V계수를 산출하였고, 척도의 구인타당도를 검증하기 위하여 요인분석을 실시한 결과, 4개 요인(가족간의 의사소통, 가족간의 몰입, 가족원의 적응력, 가족 가치관)이 추출되었으며, 이들은 전체적으로 57%의 설명력을 갖는다. 또한 회귀분석을 실시하여 각 요인별 문항을 선정함으로서 최종적으로 34문항이 구성되었다. '가족 건강도' 척도 및 그 하위 요인과 ${\ulcorner}Family\;Adaptability\;and\;Cohesion\;Evaluation\;Scale{\lrcorner}$, ${\ulcorner}Family\;Stengths\;Scale{\lrcorner}$과의 상관계수는 .25에서 .56사이로 나타나 본 척도의 공인타당도가 입증되었다. 척도의 신뢰도는 Cronbach의 a계수 .94로 나타났으며, 하위요인별로는 .80에서 .91로 만족스럽게 나타났다.

• 시큐리티연구
• /
• 제61호
• /
• pp.235-254
• /
• 2019

이 연구는 테러 인식에 대한 척도에 대하여 확인적 요인분석(Confirmatory Factor Analysis)을 사용하여 요인구조를 확인함으로써, 한국형 테러인식을 측정하는데 적합한 척도인지에 대한 정보를 제공하고자 하였다. 최오호 외(2016) 「국회청사 보안강화 방안에 관한 연구」에서 수집된 국회공무원을 대상으로 한 176명의 자료를 분석에 활용하였다. 연구결과 테러인식의 총 14문항으로 구성된 척도에서 테러우려 3문항, 테러발생인식 5문항, 테러대응 3문항, 테러대비장치 3문항의 요인별 모형적합도의 적합도 지수는 기준치를 충족하여 적합한 것으로 나타났다. 표준화회귀계수도 기준 값을 상회하고 있어 적합한 것으로 나타났다. 잠재변수 테러우려가 평균분산추출값의 기준 값에 다소 미치지 못한 것을 확인하였으나, 그 이외의 값은 적합한 것으로 나타나 집중타당도가 확보된 것으로 보았다. 이를 보충하고자 판별타당도를 검증한 결과 척도 수준이 적합한 것으로 나타났다. 따라서 이 연구에서 검증한 테러인식문항을 포함하여 테러와 관련된 이론과 선행연구를 바탕으로 테러인식을 측정하기 위한 적합한 문항으로 구성된 설문지가 개발되어 측정될 필요가 있다.