• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제16권
• /
• pp.201-215
• /
• 2003

이 연구에서는 창의적인 문제해결능력을 검사하는 도구로 널리 알려진 개방형 문항 5 문제를 수정 또는 번역하여 중학교 2학년 학생들에게 적용하고 그 결과를 분석하였다. 검사도구에 대한 양호도 분석 결과는 다음과 같다. 첫째, 문항 내적 일관성 신뢰도(Cronbach ${\alpha}$)의 계수는 0.8이다. 둘째, 문항반응이론에 근거한 문항의 적합도 지수는 모두 1.2미만으로서 분석모형에 적합한 문항이라고 볼 수 있다. 또한, 문항간의 난이도의 차이는 로짓트 점수가 0.6을 넘지 않은 범위에서 골고루 분포되어 있다. 셋째, 문항 신뢰도 지수가 모두 0.80보다 높은 것으로 나타나 사용된 문항들은 서로 잘 분리되어 창의적 문제해결력을 추정하고 변별하는데 무리가 없다. 학생들의 반응에 대한 분석 결과는 다음과 같다. 문항1에서 곡선을 이용한 반응은 영재학생들에서만 발견할 수 있었다. 문항2에 대한 각 반응의 독창성 점수는 모두 0이다 이것은 문항2가 널리 알려진 문제에 기인한 것으로 해석된다. 문항3은 영재학생들이 더 많은 반응을 보인 것으로 모든 반응이 독창성 점수를 부여받았다. 문항4에 대하여 일반학생들은 거의 반응을 하지 못하였다. 문항5는 대부분의 학생이 반응을 하였으며 반응의 종류도 가장 다양하였다.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제32권3호
• /
• pp.220-243
• /
• 1993

고전검사이론과 문항반응이론을 사용하여 2-7차 실험정가 수리영역문항을 분석하였다. 2차부터 7차에 걸친 시험은 피험자에게 너무 어려웠으며 횟수를 거듭함에 따라 점점 더 어려워진 것으로 나타났다. 5차 실험평가 문항분석결과에서 문항 10과 15는 검토가 필요한 문항으로 나타났다. 그리고 7차 실험평가 문항분석결과에서 문항 11과 17은 검토가 필요한 문항으로 나타났다.

• 대한수학교육학회지:수학교육학연구
• /
• 제14권4호
• /
• pp.387-401
• /
• 2004

본 연구는 최근에 이루어진 대표적인 수학 성취도 국제 비교 연구인 PISA와 TIMSS-R의 성취도를 표준화하여 비교함으로써 한국과 일본, 그리고 미국과 호주를 비롯한 영어권 국가들이 각각 유사한 성취 경향을 보인다는 사실을 확인하였다. 이를 보다 체계화하기 위해 PISA의 결과를 문항반응이론에 의해 분석하여 국가별, 문항별 난이도를 조사하였다. 문항반응이론에 근거하여 각 국가의 학생들에게 상대적으로 더 어렵고 쉬운 문항을 판별한 결과, 30개 중 16개의 문항에서 한국과 일본, 그리고 미국과 호주가 각각 동일한 성취 경향을 보이는 것으로 나타났다. 이러한 성취 경향의 유사성을 심층적으로 분석하기 위하여 한국과 일본, 그리고 미국과 호주가 각각 강세를 보인 문항들을 추출하여 그 공통점을 탐색하였다. 미국과 호주의 학생들은 열린 구성반응형 문항을 해결하는데 상대적으로 능숙하고, 한국과 일본의 학생들은 함수와 통계 영역의 문항에서 성취 수준이 높지 않으며, 형식화된 수학적 지식을 요구하는 문항일수록 한국과 일본 학생들에게 유리하게 작용하는 것으로 나타났다.

• 한국통계학회:학술대회논문집
• /
• 한국통계학회 2003년도 추계 학술발표회 논문집
• /
• pp.149-154
• /
• 2003

문항반응이론(item response theory, IRT)에서는 문항이 가지고 있는 특성을 기초로 피험 자의 능력을 추정 하고 동시 에 각 문항별 문항특성곡선(item characteristics curve; ICC)을 이용하여 문항모수를 추정하게 된다. 이러한 추정알고리즘은 이미 외국에서는 상용화되 어 활용되고 있는바, 국내 에서 개 발한 Any Assess의 활용 가능성을 모의 실험을 통하여 그 결과의 신뢰성을 검증해 보았다.

• 과학교육연구지
• /
• 제37권2호
• /
• pp.278-293
• /
• 2013

이 연구에서는 2009 개정 교육과정에 따른 고등학교 융합형 '과학' 교과에서 사용된 선다형 평가 문항의 특성을 분석하였다. 문항의 출제 경향을 분석하기 위해 융합형 교과에 특이적인 분석틀을 구안하여 분석하였으며, 문항 반응 이론을 적용하여 문항의 특성을 양적으로 분석하였다. 문항의 출제 경향 분석 결과, 문항 출처, 융합 범위, 인지 수준 측면에서 융합형 '과학' 교과의 취지를 제대로 반영하고 있지 못하는 것으로 나타났으며, 기존 교육과정의 과학 교과와 같은 분과적 교수-학습 및 평가가 이루어지고 있음을 알 수 있었다. 문항 반응 이론을 적용한 분석 결과, 대체로 문항의 난이도는 적절하며, 변별도는 높은 수준인 것으로 나타났다. 하지만 분석틀을 구성하는 3개 범주와의 연관성은 나타나지 않았다. 이와 같은 연구 결과를 토대로 융합형 '과학' 교과의 취지를 반영한 교수-학습과 평가를 위한 개선점을 논의하였다.

• Communications for Statistical Applications and Methods
• /
• 제15권3호
• /
• pp.465-481
• /
• 2008

문항반응이론(Item response theory: IRT)에서는 문항이 가지고 있는 특성을 기초로 피험자의 능력을 추정하고 동시에 각 문항별 문항특성곡선(Item characteristics curve: ICC)을 이용하여 문항모수를 추정하게 된다. 그러나 모수추정에 있어서 최대 우도추정의 경우는 초기값과 다른 여러 문제들이 발생할 수 있다. 본 연구에서는 추정 문제 해결방법의 대안으로 점근적 근사화 방법(Asymptotic approximation method: AAM)을 제안한다. 이는 자료의 수가 적거나 국소 변동이 있는 경우에 효과적인 추정방법이라고 할 수 있다. 이에 개발된 'Any Assess' 시스템을 모의실험을 통하여 신뢰성을 검정하였다.

• 한국콘텐츠학회논문지
• /
• 제13권12호
• /
• pp.321-327
• /
• 2013

이름대기 능력의 손상은 신경학적 질환을 지닌 환자뿐만 아니라, 정상적인 노화과정에 있는 노인에게서도 빈번하게 관찰된다. 이름대기 능력을 평가하기 위해 가장 널리 사용되고 있는 한국판 보스톤 이름대기 검사(Korean version-the Boston Naming Test, K-BNT)는 60문항으로 구성되어 있다. 일반노인들은 노화에 따른 주의력 감소로 인하여 검사 소요시간이 길면 검사에 대한 집중이 어려워지므로, 검사 결과에 대한 타당도 및 신뢰도를 확보하기 위해서는 문항축소가 바람직하다. 본 연구의 목적은 '문항반응이론(Item Response Theory)'을 적용하여, 60개 문항의 K-BNT를 일반노년층의 이름대기 능력을 가장 잘 평가할 수 있는 15개 문항의 검사(즉, K-BNT-15)를 개발하는 것이었다. 이를 위하여, 일반노인 175명을 대상으로 라쉬분석을 실시하여, 문항적합도, 성별 차이, 문항난이도 등을 평가하였다. K-BNT-15의 실시 결과, 일반 노년층은 10년 단위로 수행력이 감소하였고, 경도인지장애(mild cognitive impairment, MCI) 환자는 일반 노년층에 비해 유의하게 낮은 수행력을 보였다. 본 연구에서는 언어 평가도구의 단축형 개발 시, 특정 집단의 언어적 능력과 문항의 응답 결과의 관계를 규명하여 그 집단에게 적합한 문항을 선별할 수 있다는 점에서 문항반응이론이 유용함을 보여주었다. 또한, K-BNT-15가 노화에 따른 대면이름대기 감소 및 환자군과의 차이를 잘 보여주는 검사임을 검증하였다.

• 컴퓨터교육학회논문지
• /
• 제11권1호
• /
• pp.65-74
• /
• 2008

본 논문은 데이터 마이닝 기법 중 연관규칙 추출 알고리즘을 이용하여 시험 응답 데이터에서 서로 연관된 문항들을 찾아내고, 그 원인을 규명함으로써 교육평가에서 사용되고 있는 기존의 검사이론 기반의 분석 결과와 함께 사용되면 문항의 질뿐만 아니라 피험자의 성취 수준을 심층적으로 분석하는데 도움을 줄 수 있는 시험 응답데이터 분석시스템을 개발하고 구현하는데 연구의 목적이 있다. 현재의 교육평가 분야에서 문항 분석에 사용되는 고전검사 이론과 문항반응 이론은 각 문항의 독립성을 전제로 하고, 피험자들이 각 개별 문항에 반응하여 나타나는 결과를 통계적 수치를 이용하여 설명하고 있다. 그러나 실제 학교 현장에서 실시한 시험의 결과를 보면, 피험자들의 반응에 의하여 문항간 연관성이 발생하게 되며 이러한 연관성은 각각의 문항들을 분석하고 피험자의 능력을 추정하는 데 의미 있는 영향을 미치게 된다. 제안된 시스템은 연관규칙 마이닝을 이용하여 흥미로운 문항간 연관성을 추출하고, 그 원인을 분석하여 사용자에게 제공함으로써 교수-학습 방법 개선이나 문제은행의 질을 향상시키는데 도움을 줄 수 있도록 하였다.

• 정보교육학회논문지
• /
• 제5권2호
• /
• pp.268-278
• /
• 2001

본 연구는 웹기반 교수 시스템을 이용하는 학습자의 지식 수준을 지능적으로 진단하기 위하여 문항 반응을 이용한 진단 모듈의 설계와 구현에 관하여 다룬다. 문항 반응 이론은 기존의 학습자 검사 방법처럼 전체 문항에서 정답 문항의 총점에 근거를 두고 학습자를 진단하는 것이 아니라 문항 하나 하나에 근거를 두고 학습자의 지식 수준을 검사하는 것이다. 기존의 웹기반 교수 시스템의 경우 학습자의 지식 수준은 고려하지 않고 검사의 총점 결과만을 가지고 진단한 뒤 그 결과를 토대로 이분법적인 학습을 진행하는 오류를 범하고 있다. 이는 학습자의 올바른 진단이 될 수 없으며 학습자 모델을 구성하기가 어려워 진보한 지능형 교수 학습 시스템에 적용하기 어렵다. 따라서 본 연구에서는 기존에 연구된 문항 반응 이론을 수학 학습에 응용하여 학습자의 지식 수준을 진단하기 위한 학습자 진단 모듈의 설계 및 구현에 대한 방향을 제시하고자 한다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2001년도 가을 학술발표논문집 Vol.28 No.2 (2)
• /
• pp.565-567
• /
• 2001

웹의 등장으로 인터넷이 보편화됨에 따라 웹을 기반으로 하는 가상 강의실이 많이 구축되고 시다. 웹을 기반으로 하는 가상 강의실은 학습자에게 많고 다양한 정보를 제공하는 장점이 있다. 하지만, 기존 가상 강의실 시스템에서 제공하는 학습내용이 대부분 교수의 임의의 한 수준으로 제공되고 있어 학습자 개개인의 학습수준이나 목적에 맞는 학습내용을 제공하지 못하는 문제점이 있다. 본 논문에서는 이러한 문제점을 해결하기 위하여 수준별 학습내용을 제공할 수 있도록 학습 평가 에이전트를 갖는 웹 기반 가상 강의실을 제안하고 구현한다. 본 가상 강의실의 학습 평가 에이전트는 학습자에게 학습 방향과 목표에 따라 수준에 맞는 학습내용을 제공하기 위하여 학습 전에 학습자의 학습수준을 테스트한다. 이러한 테스트를 위하여 학습 평가 에이전트는 테스트 항목들에 대하여 문항반응이론을 적용한다. 문항반응이론은 문항특성의 불변성, 능력추정의 정확성, 능력추정의 불변성을 가지고 있어 학습자의 단순한 평가가 아니라 학습자의 지식수준이나 이해정도를 구체적으로 평가할 수 있는 장점이 있다. 또한 본 논문에서는 이러한 가상 강의실의 구축에 필요한 데이타베이스 설계와 시스템 환경에 대한 내용을 포함한다.