• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국과학교육학회지
• /
• 제37권2호
• /
• pp.225-237
• /
• 2017

이 연구에서는 예비 화학 교사가 개별적으로 지필평가 문항을 제작하는 과정의 특징을 분석하였다. 이를 위하여 8명의 예비 화학 교사가 기체 법칙에 대한 6개의 지필평가 문항을 제작하는 발성 사고 과정과 개별 심층 면담 전사본을 분석하였다. 분석 결과, 예비교사들은 지필평가 문항 제작 과정에서 문항 제작 계획 단계의 체계성 부족, 수업과 평가의 상호관련성에 대한 인식 및 고려 부족, 문항 유형 결정 기준의 다양성, 문항의 행동 영역과 난이도 판별 곤란, 교사용 지도서 활용의 제한성과 교사용 지도서에 대한 오해, 검토 관점과 내용의 제한성 및 검토시기에 따른 차이점 등의 6가지 특징을 보였다. 이는 예비교사의 지필평가 문항 제작 능력을 향상시키는 방안을 모색하는 데 의미있는 시사점을 제공할 수 있다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2011년도 한국컴퓨터종합학술대회논문집 Vol.38 No.1(B)
• /
• pp.262-265
• /
• 2011

많은 학습 시스템에서 학습자의 수준에 맞는 맞춤학습을 위해서 학습자의 정확한 능력을 측정하는 평가 방법이 필요하다. 기존의 지필고사는 이를 위해서 학습자의 능력과 관련된 많은 수의 문항을 똑같은 시간과 순서대로 풀게 되므로 평가의 효율성 면에서 문제를 가지고 있다. 따라서 이러한 지필고사방식의 문제점을 해결하기 위해 문항정보이론과 컴퓨터의 처리성능을 결합시킨 컴퓨터화된 적응적 검사(CAT)에 대한 연구가 활발히 진행되고 있다. CAT는 지필고사의 문제점을 상당부분 해결했으나 문항간 연관성에 대해서는 독립을 가정하여 그렇지 않은 경우에는 비효율성을 가져올 수 있다. 본 논문에서는 문항반응이론 방식의 CAT가 가진 문제점을 해결하면서 성능이 개선된 베이지안 네트워크를 도입한 CAT를 제안한다. 이는 베이지안 네트워크에 평가문항을 세부분야별로 대입하여 한 문항에 대한 응답으로 그와 연관된 분야의 학습자 능력을 추론한다. 또한 실험을 통해 기존의 기법을 사용했을 때에 비해 학습자의 실제 능력치에 수렴하는 속도가 증가함을 보인다.

• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제18권2호
• /
• pp.143-154
• /
• 2004

학교에서 실시되는 평가의 주체는 교사이므로, 교사는 '좋은 평가 도구'를 개발 ${\cdot}$ 제작 할 수 있어야 한다. 좋은 평가 도구를 제작하기 위해서는 이에 대한 직접적인 훈련이 필수적인 동시에 교사 교육의 첫 단계부터 좋은 평가 도구로 평가를 받는 간접 경험도 중요하다. 이 논문에서는 문항반응이론을 적용하여 수학교사 양성기관에서 사용되는 지필고사 문항에 대하여 신뢰도, 타당도, 난이도 및 변별도를 측정하였다. 이 결과는 평가 문항을 개발할 때에 기초자료로 사용될 수 있다.

• 대한수학교육학회지:수학교육학연구
• /
• 제24권4호
• /
• pp.573-594
• /
• 2014

교사의 평가 전문성의 영역 중에서도 평가 문항 제작 능력은 평가의 타당도, 신뢰도에 있어 필수적인 요소이다. 다시 말해, 평가문항의 내용적인 측면과 형식적인 측면에서의 오류는 올바른 평가를 저해하는 요소이며 이러한 평가를 통하여 긍정적 피드백이 이루어질 수 없다. 본 연구는 서울 경기 인천 일반고등학교 45개교 수학과 중간고사와 기말고사 기하와 벡터 60개 시험지의 문항 분석을 통하여 지필평가의 내용적인 측면과 형식적인 측면에서의 문항 오류와 개선점에 대하여 논하고, 이를 통하여 교사들의 평가 문항 제작에 대한 능력 제고를 그 목적으로 하고 있다.

• 대한화학회지
• /
• 제65권1호
• /
• pp.48-57
• /
• 2021

본 연구는 국제 학업성취도 평가인 TIMSS 2019 사전검사에서 지필 평가와 컴퓨터 기반 평가로 시행된 과학 평가 문항을 분석하여 검사 매체에 따라 문항 정답률에 영향을 미치는지를 문항 및 학년별로 살펴보았다. 그 결과, 4학년과 8학년 모두 검사 매체에 따른 과학과 문항 정답률 차이가 크지 않았다. 학년별로 살펴보면, 8학년보다는 4학년의 경우 정답률 차이가 상대적으로 크게 나타났다. 문항별로 살펴보면, 선다형 문항보다는 서답형 문항의 경우 정답률 차이가 상대적으로 크게 나타났다. 검사 매체 영향에 대한 과학과 평가 문항 내용을 분석한 결과로는 선다형 문항은 지필 평가와 컴퓨터 기반 평가 문항간의 차이가 거의 없었으나, 서답형 문항은 지필 평가에 비해 서답형 문항의 정답률이 낮아지는 경향을 보였다. 또한, 학년별로는 4학년 학생들이 8학년 학생들보다 서답형 문항에서 정답률이 낮아지는 것으로 나타났다. 본 연구를 토대로, 우리나라 컴퓨터 기반 평가의 개발과 현장 도입과 관련된 시사점을 제공하고 컴퓨터 기반 평가가 학교 평가로 잘 정착하기 위한 교육적 함의를 고찰하고자 한다.

• 대한화학회지
• /
• 제54권6호
• /
• pp.781-786
• /
• 2010

이 연구는 중학교 1학년 과학과 지필평가 문항 중 물질 분야 문항에 나타난 정보제시의 오류와 오류 유형별 빈도수를 조사 분석하였다. 중학교 1학년 과학과 물질 분야 문항에서 조사된 정보 제시 오류 유형은 불충분한 정보, 불필요한 정보, 잘못된 정보, 교육과정 내용을 초월한 정보, 불명확한 정보 등의 다섯 가지로 나타났다. 분석한 167개의 문항 중 81개의 문항(48.50%)에서 정보 제시 오류가 있는 것으로 조사 되었다. 지필평가 문항의 정보 제시 오류로 인하여 학습자의 과학 학습에 대한 부정적인 관점이 발생할 수 있기 때문에 교사가 문항 개발할 때 세심한 검토가 필요하다.

• 대한수학교육학회지:학교수학
• /
• 제19권1호
• /
• pp.43-58
• /
• 2017

교사의 교육과정에 대한 이해 정도에 따라 교수 학습 방법에 상당한 차이가 존재할 수 있으며 평가 문항은 이러한 차이를 반영하는 대표적 산물 중 하나이다. 그러므로 지필평가 문항 분석을 통하여 교사의 교육과정에 대한 이해도가 지필평가에 어떻게 반영되고 있는가에 대한 실태 연구가 필요하다. 본 연구에서는 2009 개정 수학과 교육과정에 기반하여 중간고사와 기말고사로 출제된 '미적분I' 219개 검사지에 수록된 문항 중 '수열의 극한'을 내용 영역으로 하는 문항을 중심으로 변화된 교육과정이 학교 현장의 지필평가에서 어떻게 반영되고 있는지를 분석하였다. 분석 결과를 토대로 지필평가에서 나타난 문제점을 확인하고, 교육과정 개정 이후 새로운 교육과정의 안정적 안착을 위하여 반드시 동반되어야 할 교육정책 관련 시사점을 도출하고자 하였다.

• 과학교육연구지
• /
• 제44권1호
• /
• pp.38-49
• /
• 2020

본 연구의 목적은 고등학교 물리 I '시공간과 우주' 단원의 지필평가 문항과 교과서 목표가 인지영역과 내용영역에서 어느 정도 유사한지를 분석하기 위한 것이었다. 9개의 고등학교에서 출제한 지필고사 문제지와 평가원에서 출제한 문항 중에서 물리 I의 첫번째 단원인 '시공간과 우주'에 해당하는 문항들을 분석하였다. 문항의 분석기준으로 교육과정 성취기준에 제시된 내용영역들과 교과서에 진술된 목표들을 사용하여 살펴보기 위해 성취기준에 따라 내용영역을 11개로 분류하였고, 인지영역 수준은 지식, 이해, 적용의 틀로 각각 분류하였다. 결론적으로 학교에서 출제된 문항에서는 적용능력을 평가하는 문항의 비율이 낮았으며, 내용영역간 분포에도 불균형이 나타났다. 비율차 지수를 통한 비교에서는 교과서에 제시된 학습목표와 학교 출제 문항은 유사성이 매우 높았지만, 교과서 목표와 평가원 출제 문항을 비교하였을 때는 유사성이 낮았다. 이상을 바탕으로 평가문항의 타당성을 높이기 위한 몇 가지 제언을 하였다.

• 한국수학사학회지
• /
• 제25권2호
• /
• pp.97-111
• /
• 2012

본 연구는 평가 문항에 대한 컨설팅 내용을 '교수에 필요한 수학적 지식 (MKT)'의 영역과 비교하여 '평가 문항 제작에 필요한 지식'의 영역을 알아볼 목적으로 2007년부터 2009년까지 A교육청의 컨설팅단에서 일선학교 교사들이 출제한 문항에 대해 컨설팅을한 내용을 수집하여 분석하였다. 이를 통하여 '평가 문항 제작에 필요한 지식'을 알아보았으며 교사들이 보다 질 높은 평가 문항을 제작할 수 있도록 하기 위해서는 문항 출제 관련 연수 및 컨설팅이 계속해서 이루어질 필요가 있다고 판단된다.