• 한국인지과학회:학술대회논문집
• /
• 한국인지과학회 2002년도 춘계학술대회
• /
• pp.3-8
• /
• 2002

대규모 수험자를 대상으로 하는 경우, CBT 방식은 PBT 방식에 비해 비용이나 처리 방법에 있어 효율적이라는 장점을 갖고 있다. 하지만, CBT 평가가 제대로 운영되려면 많은 문항으로 구성된 대규모의 문제 은행이 있어야 하며, 기 구축된 문항은 적합성과 공정성이 반드시 보장되어야 한다. 이에 본 연구는 4,000여 명 이상의 수험자를 대상으로 8000문제가 넘는 문제 은행이 구축되어 실제 CBT 시스템을 개발·운영하고 있는 P 대학교 CBLT 테스트 시스템의 문항들을 분석할 방법을 제안한다. 연구 결과 CBLT 테스트 시스템의 문제 은행의 개별 문항들이 출제자 1인의 주관적 판단에 달려있어 문항에 대한 질 관리가 어렵다는 문제점을 해결하기 위해서는 고전검사이론이 적합하다고 판단된다. 그러나 매 시험이 동질한 문항 세트로 구성되기 위해서는 문항에 대한 충분하고 객관적인 자료가 절대적으로 필요하다. 이를 위해서는 CBLT 테스트 시스템과 같이 응답자 수가 2∼300여 명 전후이며, 40문항의 문항 세트에 대한 분석은 2모수 정도가 적당하다고 판단된다.

• 한국수학교육학회지시리즈C:초등수학교육
• /
• 제15권2호
• /
• pp.147-158
• /
• 2012

이 논문에서는 국내 교육현장에서 적용 사례를 찾아보기 힘든 반성군 문항을 소재로 하여 그 개념과 구체적인 문항 사례, 적용에 따른 학생들의 반응 등을 알아보고, 더불어 반성군 문항을 해결한 후 학생들의 인식을 설문조사하였다. 이를 위해 초등학교 6학년 영재아동을 대상으로 반성군 문항 중심의 문제해결 수업을 진행하였다. 수업에 투입한 반성군 문항에 대한 학생들의 반응을 분석하였으며, 기존 수학 수업 또는 영재 수업에서의 문항에 대비하여 반성군 문항에 대한 인식 등을 살펴보았다. 이는 우리나라에 반성군 문항의 도입이나 영재 프로그램 개발에 기초자료가 될 것으로 보인다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2008년도 춘계학술발표대회
• /
• pp.296-299
• /
• 2008

E-Learning 환경에서 학습자에게 보다 정확한 맞춤형 교육 시스템을 제공하기 위하여 평가 문항 및 학습 문항의 난이도, 변별도 등과 같은 문항 정보 활용이 필요하다. 본 논문에서는 문항 난이도, 변별도의 수치를 메타데이터에 저장하고, 평가 문항 및 학습 문항을 저작할 수 있는 템플릿(Templates) 및 GUI(Graphical User Interface) 기반의 SMIL(Synchronized Multimedia Integration Language) 저작도구를 설계 구현 하였다. 구현한 시스템은 SMIL 문법을 모르는 교수자가 문항 난이도, 변별도를 메타데이터에 저장하고, 학습 문항을 쉽게 저작하는데 효율적이다. 또한 저작된 문항은 XML(Extensible Markup Language) 기반 메타데이터를 활용함으로서 다른 플랫폼과의 통합 관리 및 재사용에 용이하다.

• 대한수학교육학회지:학교수학
• /
• 제14권4호
• /
• pp.517-529
• /
• 2012

학교에서의 수학 평가는 국가 교육과정과 일관되게 이루어져야 한다. 본 연구는 예비교사들이 교육과정에 충실하게 평가 문항을 개발한 과정을 분석하였다. 예비교사들은 교육과정에 대한 지식을 이미 갖추었지만 평가 문항에 교육과정을 충실하게 반영하지 못했다. 그러나 동료들과 여러 차례의 검토와 수정 과정을 거친 토론 속에서 평가 문항의 교육과정 충실도는 점점 더 높아졌다. 그리고 예비교사들은 토론을 통한 문항 수정을 하면서 교육과정 외에 출제자의 의도에 부합하게 문항을 구성하고, 학생들이 문항을 쉽게 이해할 수 있도록 돕고, 문항들 간의 일관성을 갖기 위한 의견을 제시하면서 문항의 완성도를 높여 갔다.

• Communications for Statistical Applications and Methods
• /
• 제17권3호
• /
• pp.327-335
• /
• 2010

문항반응이론은 문항의 난이도와 변별도가 검사를 치른 집단에 무관하게 항상 일정하며, 학생들이 매번 다른 검사를 치른다고 해도 자신의 고유한 능력점수를 받도록 하기위한 문항분석방법이다. 본 연구에서는 2000년부터 2009년까지 최근 10년 동안 대학수학능력시험에 출제되었던 통계영역 문제에 대하여 문항반응이론을 통한 분석을 실시하고 문항변별도와 문항난이도 등에 대해서 알아보았다. 그 결과 거의 60%의 문항이 어려운 문항으로 나타났다. 그러나 문항변별도는 비교적 양호한 것으로 판명되었다.

• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국수학교육학회:학술대회논문집
• /
• 한국수학교육학회 2007년도 제38회 전국수학교육연구대회 프로시딩
• /
• pp.51-66
• /
• 2007

본 연구에서는 수학영재교육의 정상화라는 측면에서 서울교육대학교 과학영재교육원의 사례를 중심으로 수학과 영재선발 과정 중에서도 수학분야 문항의 분석을 통하여 지원한 학생들의 수학 개념에 대한 반응을 알아보고 영재교육원에 지원하는 학생들의 수학 학습의 문제점을 진단하고, 수학 영재학습 대상자 선발을 위하여 보다 바람직한 수학 문항 개발 위한 개선점에 대하여 알아보았다. 지원자들의 수학 개념, 원리, 법칙에 대한 이해도는 예상보다 매우 낮게 나왔으며 향후 수학영재 선발 문항의 개발에서는 문항의 개발자들이 수학영재 판별을 위한 진지한 고민과 함께 수학영재들의 능력을 적절히 측정할 수 있는 문항을 개발할 필요성을 제기하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2009년도 춘계학술발표대회
• /
• pp.992-995
• /
• 2009

온라인 평가 시스템의 발전으로 오프라인을 통한 전통적인 시험에서 수준에 맞는 다양한 평가가 가능한 온라인 평가가 폭넓게 수행되고 있다. 하지만 평가문항에 대한 체계적인 유형 분류가 미흡하여 평가문항을 온라인 평가 시스템을 통해 표현하고 이기종 시스템간의 평가문항을 원활하게 공유하지 못하고 있다. 이 논문은 국내외 평가문항 유형 분류를 분석하고 온라인 상에서 평가문항을 효과적으로 표현하기 위한 명확한 문항 분류 기준을 제시한다.

• 한국지구과학회지
• /
• 제26권6호
• /
• pp.511-523
• /
• 2005

본 연구에서는 한국 지구과학 올림피아드 문항의 질 향상 방안을 모색하고자 1회와 2회 예선 및 본선 문항을 다양한 측면에서 분석하였다. 문항 분석을 위해 내적 및 외적 문항 분류틀을 구안하여 적용하였다. 고전 검사이론을 적용하여 문항의 난이도와 변별도, 상관계수, 그리고 신뢰도를, 일반화가능도 이론을 적용하여 일반화가능 도를 각각 추정하였다. 문항 분류틀 적용 결과는 다음과 같다: (1) 내용 차원에서는 지질 영역과 천문 영역에, 지식 및 탐구과정 차원에서는 자료 분석 및 해석에 집중되는 경향을 보였다. 또한 맥락 차원에서는 거의 대부분의 문항이 교과서적인 상황을 토대로 한 것이었다. (2) 요구 사고 수준에서 예선과 본선간의 차이를 발견할 수 없었다. (3) 문항 표현 범주에서는 그림의 사용 비율이 가장 높았고, 문항 유형 범주에서는 예선은 선다형과 단답형의 비율이, 본선은 서술형의 비율이 높았다. 또한 문항 형식 범주에서는 중학부와 예선은 단독형의 비율이 높고, 고교부와 본선은 복합형의 비율이 높았다. 문항을 분석한 결과는 다음과 같다: (1) 중학부는 대체로 난이도가 낮고, 변별도는 적절하였다. 그러나 고교부는 일반고와 과학고간에 상당한 차이가 있었다. (2) 중학부는 대기 영역과 총점과의 상관이, 고교부는 천문 영역과 총점과의 상관이 가장 높았다. (3) 양호한 문항이 가장 많은 일반고부의 문항 내적 일관성신뢰도와 일반화가능도가 가장 높았다. (4) 일반 고는 출제된 문항 수로 적정 수준의 일반화가능 도에 도달되나, 중학부나 과학고는 출제된 문항보다 2배 이상 많은 문항수가 필요한 것으로 나타났다.

• 한국콘텐츠학회논문지
• /
• 제16권7호
• /
• pp.50-62
• /
• 2016

본 연구는 전문대학을 선택하는 과정에 영향을 미치는 요인을 파악하기 위한 측정도구를 개발하고자 시행되었다. 이를 위해 연구모형과 초기문항을 설정하였고 내용타당도와 1차 예비조사과정을 거쳤다. 문항의 타당도와 신뢰도 분석을 위해 충북 제천 소재의 일개 전문대학 신입생 230명을 대상으로 2차 예비조사를 실시하였으며 문항분석과 문항 신뢰도 분석, 주성분 분석을 이용한 요인분석, Cronbach's ${\alpha}$ 계수를 통한 도구의 신뢰도를 검증하였다. 분석결과 전체 변량의 68.37%를 설명하는 15요인(61문항)이 추출되었으며 속성에 따라 매체경로정보수집(4문항), 대학활동경로정보수집(3문항), 대학지원 및 환경(4문항), 교육관련(5문항), 의사결정영향인사(3문항), 교육품질(4문항), 교육서비스(5문항), 대학명성(3문항), 접근성(2문항), 개인상황(2문항), 매체광고(5문항), 대학프로모션(4문항), 온라인홍보(4문항), 인적홍보(3문항), 대학 이미지(10문항)로 분류되었다. 본 설문도구의 Cronbach's ${\alpha}$는 전체 0.916이었고 각 요인별로 0.694~0.878로 나타났다. 개발된 측정도구는 급격한 환경변화로 신입생 충원에 어려움이 많은 지방 전문대학의 정책적 전략 수립 시 필요한 기초자료 수집에 활용될 수 있을 것이라 생각된다.