• 한국과학교육학회지
• /
• 제24권3호
• /
• pp.519-531
• /
• 2004

최근 제7차 교육과정이 실시되면서 준거 지향적인 수행평가에 대한 요구가 커지고 있으며, 이러한 상황에서 평가의 절대적인 기준을 마련할 필요성 또한 절실해지고 있다. 본 연구는 제7차 교육과정에 근거하여 고등학교 과학 중 '생식' 단원과 '생물 농축' 단원에 대해서 필수 학습 요소, 성취 기준, 평가 기준 및 평가 문항을 개발하고, 이를 바탕으로 개발한 평가 문항을 실제 현장에 적용하여 그 타당성을 검증하는 것을 목적으로 한다. 본 연구에서는 제7차 교육과정과 고등학교 과학의 7종 교과서를 바탕으로 하여, '생식' 과 '생물 농축' 단원의 필수 학습 요소를 추출하고, 준거 지향 평가의 기초가 되는 객관적이고 타당한 성취 기준 및 평가 기준을 마련하였다. 추출된 필수 학습 요소는 '생식' 단원에서 12개, '생물 농축' 단원에서 4개이었으며, 개발된 성취 기준은 '생식' 단원에서 총 26개, '생물 농축' 단원에서 총 9개로 각각은 지식(K), 탐구(P), 태도(A)의 세 개 영역으로 구분하여 개발하였다. 이상과 같이 개발된 성취 기준을 바탕으로 평가 기준을 개발하였다. 개발된 평가 기준의 수는 '생식' 단원에서 총 25개, '생물 농축' 단원에서 9개였다. 성취 기준과 평가 기준에 따라 '생식' 단원과 '생물 농축' 단원에서 개발된 평가 문항의 수는 서술형 문항 17개, 논술형 문항이 13개, 포트폴리오가 2개로 총 22문항이었다. 각 평가 문항은 구체적인 채점 기준을 제시하였으므로, 교육과정에 근거한 객관적인 평가에 사용될 수 있다. 개발된 평가 문항 중, 서술형 문항 8개를 경기도 소재 고등학교 1학년 학생 240명을 대상으로 적용 분석하였다. 서술형 문항에 대한 학생들의 응답을 두 가지 검사 이론을 적용하여 분석하였는데, 평가 문항의 기본적인 양호도 검증을 실시한 결과, 본 연구에서 개발된 서술형 문항들은 난이도와 변별도 면에서 전반적으로 적절한 지수를 보여 수행 평가로 사용하기에 적절한 문항들이었다. 개발한 서술형 수행 평가 문항들은 미리 개발된 성취 기준과 평가 기준을 바탕으로 하였으므로 교수 학습의 목표와 내용에도 적합하였다. 고전 검사 이론과 다분 문항 반응 이론에 의해 분석된 문항의 변별도에는 언어적인 해석의 차이가 없었으나, 문항 난이도의 경우는 고전 검사 이론을 사용하였을 때 집단의 특성이 많이 나타나 다분 문항 반응 이론을 사용한 결과와 비교하여 해석의 차이가 다양하게 나타났다.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제53권4호
• /
• pp.509-524
• /
• 2014

This study was to investigate the types of errors and the frequency of errors to understand students' solving process on the descriptive items with the students of an excellent high school which located in a non-leveling local school district of Gyunggi Province. All 11 items were developed in the equation of a circle and 120 students who attended this high school participated in solving them. The result showed a tendency as follows: Logically invalid inference(Type A, 38.83%) of errors, Omission error of the problem solving process(Type B, 25%), Technical error(Type C, 15.67%), Wrong conclusion(Type D, 11.94%), Use of wrong theorem(Type E, 5.97%), and Use of wrong picture(Type F, 2.61%). The logically invalid inference the students showed with a largest tendency was made because of the lack of reflection. This meant that this error could be corrected in a little treatment of carefulness.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제47권2호
• /
• pp.181-195
• /
• 2008

The purpose of this study was to investigate the understanding of basic knowledge of mathematics for $6^{th}$ grade students in elementary school by an essay test and provide instructional suggestions for teachers. A total of 132 students from 6 classes in 3 elementary schools were tested and analyzed in terms of the characteristics of correct answers and types of incorrect answers. The results showed that students had poor understanding of basic conceptual concepts and principles throughout six content areas of school mathematics curriculum, despite their good performance on mathematical skills. This study included implications to teaching and learning for each of the content areas.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제63권2호
• /
• pp.187-207
• /
• 2024

본 연구에서는 GPT-4 기반의 ChatGPT를 활용한 서술형 평가 문항의 자동 채점 가능성을 탐색하기 위해 교사와 GPT-4 기반의 ChatGPT의 채점 결과를 비교, 분석하였다. 이를 위해 학생평가지원포털에 있는 고등학교 1학년 순열과 조합 단원에서 3개의 서술형 문항을 선정하였다. 문항 1, 2는 문제 해결 전략이 1가지인 문항이고, 문항 3은 문제 해결 전략이 2가지 이상인 문항이었다. 8년 이상의 교육 경력이 있는 교사 2명이 학생 204명의 답안을 채점하고, GPT-4 기반의 ChatGPT의 채점 결과와 비교하였다. 문항별로 Few-Shot-CoT, SC, 구조화, 반복 프롬프트 기법 등을 활용하여 채점을 위한 프롬프트를 구성하였고, 이를 GPT-4 기반의 ChatGPT에 입력하여 채점하였다. 채점 결과, 문항 1, 2는 교사의 채점 결과와 GPT-4의 채점 결과 사이에 강한 상관관계를 충족하였다. 문제 해결 전략이 2가지인 문항 3은 먼저 채점 전 학생 답안을 문제 해결전략별로 분류하는 프롬프트를 GPT-4 기반의 ChatGPT에 입력하여 답안을 분류하였다. 이후 유형별로 채점 프롬프트를 적용하여 GPT-4 기반의 ChatGPT에 입력하여 채점하였고, 채점 결과 역시 교사의 채점 결과와 강한 상관관계가 나타났다. 이를 통해 프롬프트 엔지니어링을 활용한 GPT-4 모델이 교사의 채점을 보조할 수 있는 가능성을 확인하였으며 본 연구의 한계점 및 향후 연구 방향을 제시하였다.

• 과학교육연구지
• /
• 제38권3호
• /
• pp.670-690
• /
• 2014

이 연구는 고등학교 생명 과학 I의 지필평가 실태를 조사하기 위하여 일반계 고등학교 10개교를 임의로 선정하여 2013학년도 생명 과학 I의 문제지 33부(선택형 문항 690개, 서답형 문항 162개)를 분석하였다. 문항에 대해서는 Bloom의 신 교육목표 분류체계의 틀과 국가수준 학업성취도 평가의 과학과 평가틀에 근거하여 분류하였다. 선택형 문항의 경우 실제 정답률과 이원목적분류표에 제시된 난이도를 비교하였고, 서답형 문항의 경우 문항유형에 따른 문항 수와 배점을 비교하였다. 서답형 문항 중 서술형 문항에 대해서는 반응의 허용 정도, 자료 제시 여부, 출제 형식에 따라 구분하였다. 지필평가 문항 분석 결과, 서답형 문항의 비율이 19.0%로 선택형 문항의 비율(81.0%)보다 낮았다. Bloom의 신 교육목표 분류체계에 의한 분석 결과, 지식 차원에서 '개념적 지식'에 해당되는 문항이, 인지과정 차원에서 '이해하다'에 해당되는 문항이 많았다. 국가수준 학업성취도 평가의 과학과 평가틀에 의한 분석에서 '지식' 영역에 해당되는 문항이 '탐구' 영역에 해당되는 문항보다 약 9배 많았다. 선택형 문항에서 이원목적분류표에 제시된 난이도와 실제 정답률을 비교한 결과, 일치하는 비율은 41.5%였다. 서답형 문항의 유형에 따른 문항 수의 비율을 비교한 결과, 단답형 문항의 비율이 34.0%였고, 그리기 문항은 '세포와 생명의 연속성' 단원에서 주로 출제가 되었다. 서술형 문항에서 반응의 허용 정도에 따라 분류한 결과, 모두 '응답 제한형'에 해당되었고, 그 중 '내용범위 제한형'(67.3%)에 해당되는 문항이 가장 많았다. 그리고 자료 제시여부에 따라 분류한 결과 '자료 제시형'(65.4%)에 해당되는 문항이, 출제 형식에 따라 분류한 결과 '지식 서술형'(80.4%)에 해당되는 문항이 가장 많았다. 이 연구 결과를 통하여 학교 현장에서 '탐구' 영역에 해당되는 문항을 더 많이 출제할 필요가 있으며, 서술형 문항의 실제적 비중을 높이면서, 다양한 유형으로 출제할 필요가 있다고 생각된다.

• 한국학교수학회논문집
• /
• 제15권4호
• /
• pp.719-745
• /
• 2012

초등학교 4학년 수학은 도형 영역에서 다양한 개념들이 동시에 등장하는 시기로, 특히 삼각형이나 사각형 등과 같은 평면도형의 경우 그 개념이 총체적으로 학습되는 시기이다. 본 연구는 초등학교 4학년 학생들을 대상으로 그들이 학습한 도형 개념들에 대한 이해 정도를 파악하기 위해 '정의하기' 서술형 평가를 실시하고, 또한 그들이 갖고 있는 비형식적인 지식을 살펴보기 위한 '이름짓기'(naming) 서술형 평가를 실시하였다. 이를 통해 학생들이 이해하고 있는 도형의 개념정의와 개념이미지를 분석하고, 각각의 특징 및 반복해서 등장하는 오 개념과 그 원인을 분석하여 도형을 학습하고 지도하는 과정에서 생각해볼 유의점을 제안하고 있다. 더불어 학생들의 이름짓기 활동을 통해 도형의 어떤 요소에 가장 먼저 주목하는가를 분석함으로써 이 과정에서 그들이 인식하지 못하거나 빈도가 낮게 나타난 수학적 성질과 개념을 살펴보고 동시에 학교수학에서 도형 학습을 통해 갖게 되는 비형식적 지식을 고찰함으로써 도형 영역의 학습 지도를 위한 개선 방안을 제시하고 있다.

• 한국초등수학교육학회지
• /
• 제18권1호
• /
• pp.123-148
• /
• 2014

본 연구의 목적은 초등수학영재들과 일반학생들 사이의 서술형 평가에서 나타나는 수학적 추론 능력과 오류 유형을 비교분석 함으로써 초등수학영재의 인지적 특성을 이해하며, 초등수학영재의 교육에 도움을 주는 것이다. 연구 대상은 광역시 소재의 5개 초등학교 수학영재학급 학생 63명과 4개 초등학교 일반학생 63명이다. 연구 결과 첫째, 초등수학영재가 일반학생보다 서술형 평가에서 수학적 추론 능력이 높은 것으로 나타났다. 즉 p<.05 수준에서 두 집단 간 유의미한 차이를 보이는 것으로 나타났다. 이러한 결과가 나타난 이유는 다음과 같다. 먼저, 귀납적 추론에 있어서 초등수학영재는 문제의 해결에 필요한 적절한 자료를 수집하는 능력과 수집한 자료를 분석하여 규칙을 찾고 문제를 해결하는 능력이 모두 일반학생보다 높았기 때문이다. 또 유비적 추론에 있어서도 초등수학영재는 두 상황의 구조적 유사성을 인식하고 기저 상황의 핵심을 더 잘 파악하였으며, 적용에 있어서도 타당한 대응을 통해 표적 상황을 유연성 있게 해결하였기 때문이다. 연역적 추론에 있어서는 초등수학영재와 일반학생 모두 완벽한 추론을 이끌어내는 데에 어려움을 겪는 것으로 나타났으나, 초등수학영재는 일반학생에 비해 문제 해결을 위한 타당성과 일반성을 가진 근거를 수집하였고, 논리적인 추론 단계에서 생략된 부분이 적었기 때문이다. 둘째, 초등수학영재가 일반학생에 비하여 오류를 적게 범하는 것으로 나타났다. 가장 많이 범하는 오류의 유형은 초등수학영재와 일반학생이 모두 풀이 과정의 생략으로 같았으나, 일반 학생들은 개념 원리의 오류나 문항 이해의 오류가 상대적으로 많은 편이었고, 초등수학영재들은 기록 단계의 오류가 높은 것으로 나타났다.

• 한국산학기술학회:학술대회논문집
• /
• 한국산학기술학회 2007년도 추계학술발표논문집
• /
• pp.162-165
• /
• 2007

본 논문에서는 고주파 전류형 인버터의 출력을 제어하기 위하여 입력단의 쵸핑 스위칭 방법을 제안한다. 인버터의 출력제어는 스위칭 소자에 인가되는 구동신호에 위상천이의 크기에 따라 제어하고 있으며, 제한회로의 동작원리를 서술하였다. 또한 회로설계에 필요한 출력특성은 수치해석에 의해 평가자료를 도출하고 실험 장치를 제작하여 이론결과와 비교 검토하여 특성평가의 정당성을 입증하였다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.606-610
• /
• 2009

본 논문에서는 단기 서술형 답안의 자동 채점을 위하여 기계 번역 자동 평가에서 널리 사용되는 BLEU(BiLingual Evaluation Understudy)를 활용한 방법을 제안한다. BLEU 는 기계가 번역한 것이 사람이 번역한 것과 비슷할수록 기계번역의 질이 좋을 것이다 라는 것을 가정하여 평가한다. 즉, 특정 문장을 여러 사람이 번역한 문장을 기계가 번역한 문장과 n-gram 방식으로 비교해 점수를 매기는 것이다. 이와 비슷하게 본 연구에서는 여러 개의 정답 문장과 학생의 답안 문장을 BLEU 와 같은 방식으로 상호 비교하여 학생의 답안을 채점하였다. 실험에서는 이러한 채점 방식의 정확도를 평가하기 위하여 사람이 채점한 점수와의 상관관계를 계산하였다.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제53권1호
• /
• pp.131-146
• /
• 2014

This study examines whether there is discrepancy between elementary and middle school mathematics teachers' beliefs and practices in constructed-response assessment and how their beliefs and practices are interrelated. Analyzing the responses of 212 elementary teachers and 189 middle school mathematics teachers to the questionnaire, we found that there is lack of consistency among elementary and middle school teachers' beliefs, practices, and expected benefits regarding constructed-response assessment. In addition, there was a weak correlation between each group of teachers' beliefs and expected benefits about constructed-response assessment. The results from this study imply that such inconsistency in elementary and middle school teachers' beliefs and practices regarding assessments may determine the effects of constructed-response assessment.