• 컴퓨터교육학회논문지
• /
• 제23권1호
• /
• pp.29-36
• /
• 2020

학생의 능력을 정확하게 파악하기 위하여 다양한 문항들이 평가도구로 사용되었다. 그 중에 선다형 문항은 채점에 있어서 객관성과 신뢰성이 높다는 이점이 있지만 추측의 요인을 제거할 수 없다. 본 논문은 선다형 문항을 질문지와 선택지 사이의 관계에 따라 2개의 유형으로 분류하였다. 하나는 선택지 k개에 대해 추측의 확률이 1/k인 기존의 고전검사이론에서 사용하는 유형이며 다른 하나는 부분적 지식이라는 개념을 도입한 유형이다, 제안한 유형에서 부분적 지식의 개수가 i일 때 추측의 확률을 (i+1)/k인 유형이다. 기존 이론에서의 문항 추측도를 기초하여 제안된 유형에 대한 문항 추측도를 유도하였다. 이를 기존의 유형과 제안된 유형에서 추측이 정답에 미치는 영향을 상호 분석하였다. 이는 제안된 유형이 기존의 유형보다 문항 추측도가 더 크다는 것을 보여주고 있다.

• 과학교육연구지
• /
• 제42권3호
• /
• pp.322-333
• /
• 2018

본 연구의 목적은 다양한 학습 배경을 가진 학습자가 지구과학 문제 풀이에서 활용하는 통합 사고의 유형과 특성을 파악하는 것이다. 중학교 2학년 4명을 대상으로 학습자의 과학 학습 관련 배경을 묻는 사전 설문조사지, 지구과학 교과를 중심으로 상황적 통합 영역의 문항이 포함된 검사지를 사용하여 조사했다. 검사지는 총 200문항으로, 10회에 걸쳐 시행되었다. 통합적 사고 능력을 파악하기 위한 문항은 40문항이었고 일반 문항이 160문항이었다. 학생들마다 일반 문항 정답율과 통합 문항 정답율에 있어 일관된 연관성을 드러내지 않았다. 각 연구 대상자의 통합 사고력의 유형을 파악하기 위하여 검사 문항 풀이 후, 유형별 정답률을 분석했고, 각 문항 풀이에 활용한 사고의 특징 파악을 위하여 연구 대상자를 면담하고 그 내용을 분석했다. 그 결과 문제 풀이에 사용한 통합 사고 유형을 지식 연계형, 실생활 연계형, 통합 탐구형으로 구분할 수 있었다. 과학 교수 학습에서 학생들의 특성을 고려하여 통합 사고력을 향상시킬 수 있는 다양한 방안이 연구되어야 할 것이다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2009년도 춘계학술발표대회
• /
• pp.992-995
• /
• 2009

온라인 평가 시스템의 발전으로 오프라인을 통한 전통적인 시험에서 수준에 맞는 다양한 평가가 가능한 온라인 평가가 폭넓게 수행되고 있다. 하지만 평가문항에 대한 체계적인 유형 분류가 미흡하여 평가문항을 온라인 평가 시스템을 통해 표현하고 이기종 시스템간의 평가문항을 원활하게 공유하지 못하고 있다. 이 논문은 국내외 평가문항 유형 분류를 분석하고 온라인 상에서 평가문항을 효과적으로 표현하기 위한 명확한 문항 분류 기준을 제시한다.

• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제24권2호
• /
• pp.445-474
• /
• 2010

중학교 1학년 학생들의 일차방정식에 대한 풀이과정에 변화가 있는지를 알아보기 위하여 일차방정식을 학습한 후 1차 조사를 하고, 5개월이 지난 후에 2차 조사를 실시한 결과는 다음과 같다. 첫째, 1차 조사와 2차 조사 간의 정답 비율의 차이를 알아보기 위하여 McNemar검정을 실시한 결과, 유형A의 문항 x+4=9에서 $p=.035^a$, 문항 $x+\frac{1}{4}=\frac{2}{3}$에서 $p=.012^a$로 나타났으며, 유형B의 문항 x+3=8에서 $p=.012^a$, 문항 6(x+20)=20에서 $p=.035^a$으로 나타났다. 둘째, 1차 조사에서 문제 유형A와 유형B의 풀이과정을 올바르게 표현하지 못하였던 학생들 중에 2차 조사에서 올바르게 표현한 학생들이 있는 반면, 1차 조사에서 풀이과정을 올바르게 표현한 학생들 중에 2차 조사에서 오류를 범하는 학생들이 나타났다. 셋째, 모든 문항에 대하여 일차방식의 풀이과정을 올바르게 표현하는 학생들이 있는 반면, 몇 개 문항은 올바르게 표현하고 몇 개 문항은 그렇지 못한 학생들이 있었다. 결론적으로, 주어진 모든 문항에 대한 풀이 과정을 올바르게 표현하였더라도 또 다른 문항이 주어졌을 때 그 문항의 풀이과정에서 올바른 표현을 할 수 있다고 예견하기가 어렵다는 것이다. 논문에서 조사한 세 가지 유형(유형A, 유형B, 유형C)에 대한 학생들의 반응을 분석한 결과에 따르면, 이 세 가지 유형의 문제 풀이과정을 분석함으로써 어떤 학생이 일차방정식의 풀이과정을 올바르게 표현할 수 '있는지', '없는지'를 판단할 수 있다는 것이다.

• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2000년도 춘계종합학술대회
• /
• pp.268-273
• /
• 2000

기존의 웹 기반 학습 평가 시스템은 학습자의 선택 기회가 없는 상태에서 일방적으로 제시된 문제지로 평가하게 되거나, 문제 은행에서 임의로 추출한 문제도 단순히 무작위로나 난이도만을 고려하여 문제지를 구성하였고, 그 결과에 대한 성취도의 분석도 한 문제지에 대한 정오표 또는 점수로 단순하게 제시하기 때문에 학습자의 지속적인 학습 관리가 이루어지지 못하고 있다. 본 논문에서는 문제유형, 과목 및 단원 난이도, 문항 형태, 문항당 배점, 문항당 배당 시간등의 다양한 정보를 가진 유형별 문제 은행을 구축하였다. 학습자는 마치 문제집을 풀고 싶은 유형의 문제를 선택하듯이 문제 은행에서 문제를 자율적으로 구성하여 평가할 수 있는 유형별 문제지나 대학수학능력시험의 기준에 맞추어 자동 구성되는 종합 문제지로 다양하게 평가할 수 있다. 또한, 한문제지에 대한 결과뿐만 아니라 유형별, 월별 성취도 분석을 통하여 평가한 총점에 대한 획득한 점수의 누적 통계를 그래프로 일목요연하게 보여주어 한 학습자에 대한 지속적인 성취도 분석이 가능하도록 구축하였다.

• 한국초등수학교육학회:학술대회논문집
• /
• 한국초등수학교육학회 2010년 학술발표대회 논문집
• /
• pp.157-172
• /
• 2010

본 연구는 현행 초등학교에서 이루어지고 있는 서술형 평가의 유형과 문제점을 분석해 보고 2007개정 교육과정에 따른 수학과 서술형 예시 평가 문항을 개발해 보는데 목표가 있다. 학교에서 시행되고 있는 평가 자료의 분석은 수학교과서, 국가수준 학업성취도 평가지, 서울시 교육청 보급 2010 장학자료집, 서울시내 학교에서 시행되고 있는 평가 문항을 분석해 보았다. 그리고 예시 서술형 평가 문항개발은 2007개정 교육과정에 따른 수학과 4학년을 대상으로 하였다. 평가 문항 분석의 결과는 문항 유형이 단순하고 교과서와 장학자료집의 수준을 벗어나지 못하고 있으며 창의성 영역의 평가는 거의 이루어지고 있지 않았다. 서술형 예시평가 문항의 개발은 수학과의 내용영역과 인지적 영역뿐 아니라 교육계의 화두가 되고 있는 창의성 영역까지 평가내용으로 포함시키고자 노력하였으며 영역별 1-2 문항을 개발하였다.

• 한국지능시스템학회논문지
• /
• 제25권5호
• /
• pp.457-463
• /
• 2015

본 논문은 적시학습을 위한 집단지성 기반 오답노트 시스템의 필요성과 개념을 제시하고 활용도 및 만족도를 보인다. 기존 오답노트 시스템은 평가문항에 대한 정답 여부를 체크하여 응답 결과가 오답인 문항에 대하여 일괄적인 정답 해설을 제공하는 특징을 갖고 있다. 이러한 특징은 학습자가 평가문항을 잘 이해하지 못하고 운 좋게 맞은 문항과 개별 학습자들의 오답 선택 과정에 대한 오류를 적절하게 피드백 받지 못하기 때문에 오답분석과 피드백 측면에서 많은 개선을 필요로 하고 있다. 본 논문에서는 이러한 '점수의 오류'를 개선하여 학습자의 취약점을 보완하는 새로운 방법인 SERO(Stability Emergency Risk Opportunity) 오답노트를 제안한다. SERO 오답노트는 자신이 풀어낸 평가문항들을 4가지 유형(S유형, E유형, R유형, O유형)으로 분류하고, 정답 해설 뿐만 아니라 집단지성을 이용한 다양한 오답노트 해설들을 제시하여 학습의 만족도를 높인다.

• 대한수학교육학회지:수학교육학연구
• /
• 제23권3호
• /
• pp.389-406
• /
• 2013

본 연구는 수학과 서술형 평가에서 나타난 중학교 2학년 학생들의 오류 유형을 문항별, 학습 수준별로 분석함으로써 효과적인 교수 학습 과정을 촉진하기 위한 기초자료를 제공하는 것을 목적으로 한다. 총 99명의 중학교 2학년 학생들의 문항 반응을 분석한 결과, 수학적 사고와 표현, 현실 맥락과 연결된 문항 혹은 수학 내용들이 연결된 문항 등에서 다양한 오류가 나타났으며 단일 오류뿐만 아니라 복합적인 오류 유형도 발견되었다. 학습 수준에 따라서도 상위 수준의 학생들은 복합적 오류 보다는 단일 오류가, 중하위 수준의 학생들은 복합적인 오류가 더 빈번히 나타났으며 오류 유형도 다양하였다. 이러한 결과는 문항의 유형별, 학습 수준별 학생들의 오류 패턴을 보여주는 것으로 향후 학생들의 오류를 수정하고 수학 학습을 촉진할 수 있는 서술형 평가 문항과 교수법 개발에 도움이 될 수 있을 것이다.

• 과학교육연구지
• /
• 제42권2호
• /
• pp.198-213
• /
• 2018

최근 들어 학생 평가 방법에서 서술형 평가의 중요성이 매우 강조되고 왔다. 본 연구는 학교현장에서 출제해 온 서술형 평가문항의 실태와 원인을 분석하고자 하였다. 이를 위해 경남 지역의 중학교 7개 학교에서 1학년부터 3학년까지의 정기고사에 출제된 서술형 문항 300개를 수집하여 문항 유형과 단원별 문항 분포를 분석하고, 문항에 관련된 성취기준의 교육목표와 평가목표를 Bloom의 신 교육목표분류에 따라 분석하여 비교였다. 연구 결과, 대부분의 교사들이 공통된 단원에서 서술형 문항을 출제하는 경향을 보이며, 단원 및 성취기준별로 출제 빈도에 큰 차이를 보였다. 문항 유형으로는 서술형이 65%에 불과하였으며 나머지는 단답형이나 완성형 문항으로 구성되었다. 또한 성취기준에서의 교육목표와 문항에서의 평가목표 사이에 일치하는 비율이 40.3%에 불과하였다. 서술형 문항의 출제교사 27명을 면담한 결과, 서술형 문항의 개발 능력 부족과 채점에서의 어려움이 올바른 서술형 평가의 주요 장애 요인인 것으로 나타났다. 따라서 평가에 대한 체계적 연수를 통해 서술형 평가의 문제점들을 해결할 필요가 있다.