• 한국산학기술학회논문지
• /
• 제13권11호
• /
• pp.5033-5043
• /
• 2012

본 연구의 목적은 현행 A대학의 강의평가 문항의 문제점을 보완하고 강의의 질 제고라는 강의평가의 본래 목적에 부합하도록 강의평가 문항을 개선하는 것이다. 이를 위하여, 대학 교육에서의 좋은 수업의 의미, 선행 연구의 강의평가 영역 및 요소, A대학의 현행 강의평가 도구의 내용 및 문제점을 살펴보았으며, 이를 토대로 개선안을 제시하였다. 연구 결과로 제안된 개선안의 주요한 특징은 다음과 같다. 첫째, 평가 영역, 평가 항목, 평가 문항의 구성 체계를 재구성하였다. 둘째, 강의 개선에 중요한 정보를 제공하기 위해 대학에서의 좋은 강의의 특징을 토대로 문항을 개발하였다. 셋째, 선행 연구의 강의평가 도구들이 공통적으로 제시하고 있는 평가 요소 등과 관련한 문항을 개발하였다. 넷째, 강의의 질 제고를 위해 필요한 정보가 있다면, 산술평균으로 결과를 제시할 수 없더라도 관련 문항을 개발하였다. 다섯째, 현행 강의평가 문항의 문제점으로 지적된 부분을 수정 보완하였다.

• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제28권4호
• /
• pp.553-571
• /
• 2014

근래 수학의 학습에서 수학의 내용뿐만 아니라 수학적 과정을 평가할 수 있는 문항의 중요성에 대한 인식이 확산되고 있다. 본 연구에서는 수학의 내용과 더불어 수학적 과정 즉, 수학적 의사소통, 추론, 문제해결을 명시적인 평가요소로 포함하는 서술형 문항으로서 '수학적 과정 문항'이라는 개념을 제안하고, 수학적 과정 문항의 제작을 위한 예시 평가기준과 문항 및 채점기준 개발을 통해 서술형 문항을 활용한 수학적 과정 평가 방안을 논의한다.

• 한국지구과학회지
• /
• 제24권3호
• /
• pp.150-159
• /
• 2003

본 연구에서는 지구과학 지식과 창의력을 동시에 적용해야 해결할 수 있는 지구과학 창의력을 평가할 수 있는 문항의 개발 방법을 제시하고자 하였다. R&D과정을 거친 본 연구의 결과는 첫째, 조작적 정의를 통해 창의력과 과학창의력간의 인지능력 차이를 명료화하였고 둘째, 과학창의력을 구성하는 하위 요소들 중에서 문항 개발이 가능하다고 판단된 유창성, 융통성, 정교성, 독창성을 선정하여 각각에 대한 조작적 정의를 내린 후 각 요소들에 대한 평가와 채점의 준거를 제시하였다. 셋째, 평가도구의 구비 조건인 타당도, 신뢰도, 변별도, 난이도를 검증하기 위하여 3번의 현장검증을 실시하였으며, 본 연구에서 개발한 지구과학창의력 평가도구는 각 하위 요소별로 2문항씩 총 8문항으로 구성되어 있다. 넷째, 문항합치도 지수 평균은 .99, 문항 내적 합치도 지수인 Cronbach ${\alpha}$값은 .79, 각 문항별 평가자간 신뢰도는 0.78,각 하위 요소별 평가자간 신뢰도는 0.75, 변별도 지수인 점이연상관 지수는 .19, 문항 난이도 지수는 .00이었다. 이와 같이 평가도구의 구비조건들이 허용 범위 내에 있는 것으로 볼 때 본 연구에서 개발한 지구과학 창의력 평가도구는 유용한 것으로 판단할 수 있다.

• 한국학교수학회논문집
• /
• 제24권4호
• /
• pp.407-428
• /
• 2021

본 연구의 목적은 우리나라와 일본의 최신 개정 교육과정에 따라 최초로 시행한 중학교 국가수준 학업성취도평가 수학 문항을 비교, 분석하고 이를 바탕으로 우리나라의 수학과 교육과정 및 교수·학습의 개선을 위해 국가수준 학업성취도평가에 적용가능한 시사점을 도출하는 것이다. 먼저 두 국가에서 시행되고 있는 국가수준 학업성취도평가를 개괄하였고, 두 국가의 중학교 수학 학업성취도평가의 문항을 내용영역, 맥락, 역량에 따른 분석틀에 따라 수와 식, 함수, 기하, 확률과 통계 영역에서 두 국가의 문항의 특성을 비교분석하였다. 이를 바탕으로 실생활 맥락을 강조하고 문제해결 과정과 결과를 반성할 수 있는 문항 개발, 교육과정 개정의 중점사항을 반영한 평가 문항 개발 등의 국가수준 학업성취도평가 개선방안과 2022 개정을 앞두고 '증명' 용어의 도입 필요성 및 방법 등 교육과정 및 교수·학습 개선방안을 제안하였다.

• 과학교육연구지
• /
• 제37권2호
• /
• pp.348-358
• /
• 2013

과학교육에서 컴퓨터는 교수 학습 뿐 아니라 평가의 목적으로도 활용되고 있다. 죽, 컴퓨터의 장점을 살린 컴퓨터 기반 평가가 실시되고 있다. 그러나 이와 같은 평가는 주로 과정 중심이 아닌 결과 중심의 평가이며, 피험자의 수만큼 컴퓨터가 있어야 하므로 학교의 정규 시험으로 활용하기 곤란하다. 그러나 수행평가의 경우 일반적으로 평가 과제가 미리 공개되므로 학급별 또는 학생별로 평가 시간이 다르게 평가를 실시하는 것이 가능하다. 따라서 본 연구에서는 실제 실험기구를 사용한 실험평가를 대체할 수 있는 컴퓨터 기반 수행평가 문항을 개발하였다. 이를 위해 먼저 물리 교사를 대상으로 과학교육에 있어 이러한 기능에 대한 평가의 필요성 및 어려운 점 등에 대한 설문조사를 실시하였고, 이를 반영하여 전류계와 전압계를 포함한 회로를 구성을 하는 평가 문항을 개발하였다. 개발된 컴퓨터 기반 문항은 실제의 실험기구를 사용하여 진행되는 평가와 유사하게 구성하였으며 평가 과정에서 학생들의 수행에 따라 적절한 피드백을 제공하고, 수행 결과를 자동적으로 채점할 수 있도록 하였다. 이를 위해 컴퓨터가 학생들의 수행 결과의 정확성을 판단할 수 있는 알고리즘을 개발하였다.

• 한국과학교육학회지
• /
• 제18권4호
• /
• pp.601-615
• /
• 1998

과학교육의 정책 수립과 평가 및 과학교육과정의 개편과 효율성 점검 등은 체계적이고 과학적인 연구 결과를 바탕으로 해야 한다. 이를 위해서 주요 선진국에서는 국가 수준 과학 학력평가를 지속적으로 실시하고 발전시켜 왔다. 우리 나라에서 그 동안 실시된 국가 수준 과학 학력평가는 많은 문제점을 가지고 있는 것으로 지적되어 왔으며, 과학 교육 정책 수립 및 평가 그리고 교육 과정 개편을 위한 자료 제공에 성공하지 못하였다. 이 연구의 주요 목적은 우리 나라 초 중 고학생들의 과학 지식 성취의 경향성을 파악하고 향후 주기적으로 진행되어질 국가적 차원의 평가 지표를 만들기 위한 국가 수준의 과학 지식 평가 체제를 개발하는 것이다. 과학교육전문가와 초 중 고 교사들로 연구팀을 구성하고, 교육평가 전문가들과의 협조와 자문을 통해서 국가 수준 과학지식 평가 체제의 방향과 주요 요소를 결정하였다. 또한 문항 개발을 위한 세미나와 워크숍을 통해서 평가문항개발 능력을 향상시켰으며, 계획한 문항을 개발하고, 수정하였으며, 초 중 고교생 958명을 대상으로 예비검사를 실시하고 그 결과를 바탕으로 최종 문항을 380개를 선정하고 수정하였다. 최종 선정한 문항은 다시 초 중 고 학생 8766명을 대상으로 본 검사를 실시하여 문항반응이론(IRT)을 이용하여 문항의 특성을 분석하였다. 연구 결과 국가 수준 과학 지식 평가는 매년 초등학교 5학년, 중학교 2학년, 고등학교 1학년과 2학년을 대상으로 학년말에 실시하는 것이 바람직하다. 표집은 다단계 유층화 표집 방법을 사용하며, 검사지는 복수형으로 개 발하며 가교문항을 활용하여 검사지간 학교급간, 종단적 비교의 기초로 삼는다. 본 연구에서는 국가 수준 과학지식 평가 체제를 위하여 각 모집단 별로 문제 은행에 포함시킬 80 내지 100문항씩 총 380문항을 개발하였다. 개발된 문항과 검사의 특성을 분석하여 본 결과 초등학교용 문항들은 중간 또는 중간 이하의 능력을 가진 학생들에게, 중학교용과 고등학교 1학년 용 문항들은 중간 또는 중간 이상의 능력을 가진 학생들에게, 고등학교 자연계용 문항들은 비교적 높은 능력을 가진 학생들에게 적합하였다. 개발한 문항들의 변별도는 우수하거나 매우 우수한 것으로 나타나서, 학생들의 과학 지식 성취를 정확하게 평가하는 데 적합한 것으로 보인다.

• 한국초등수학교육학회지
• /
• 제18권2호
• /
• pp.297-318
• /
• 2014

이 연구는 서술형 평가문항을 스스로 선발하거나 개발해야하는 초등학교 교사들에게 평가 문항에 대한 안목과 평가문항 제작 시 유의점을 제공하기 위해 시도되었다. 이를 위해 서술형 평가시행에 대해 적극적인 노력을 기울여 왔던 경기도 교육청이 2011년과 2012년에 개발한 초등학교 서술형 평가 문항 30개와 그 문항으로 시험을 치룬 2개 초등학교 3, 4, 5, 6학년 학생들의 채점된 답안지를 분석하였다. 이 연구에서는 학생들의 채점된 답안지에서 발견된 채점 및 답안 기술의 오류가 교사나 학생의 문제가 아니라 평가 문항의 결함에서 비롯된 것이라 여겨지는 것들만 선별하여 사례로 정리하고, 그에 대응하는 개선방안을 제시하였다. 이 연구에서 도출한 초등학교 수학과 서술형 평가 문항의 문제점은 크게 세 가지이다. 첫째, 고등사고력을 평가한다는 서술형 평가의 기본취지를 살리지 못하는 경우, 둘째, 채점의 공정성 문제를 불러일으키는 경우, 셋째, 문제에 포함된 내용이 학생에게 그릇된 단서로 작용하는 경우 등이 그것이다.

• 한국가정과교육학회지
• /
• 제23권3호
• /
• pp.69-90
• /
• 2011

본 연구는 중학교 기술 가정 교과 의생활 영역을 중심으로 타당도 신뢰도 높은 서술형 평가 문항을 개발하여, 이를 학생들에게 적용해보고, 평가 결과를 분석해보는 것에 목적을 두었다. 이를 위해 평가할 내용을 분석하고, 평가 문항을 설계 개발하여 평가를 실시한 후 그 결과를 분석하였다. 목표 이원분류표와 평가 영역 및 평가 목표 설정을 토대로 서술형 평가 문항 초안을 작성하였고, 채점 기준표와 예시답안을 함께 작성하였다. 전문가 검토와 예비 검사를 거쳐, 최종적으로 서술형 평가 문항 총 23개를 완성하였으며, 이를 중학교 2학년 2개 학급 총 65명을 대상으로 본 검사를 시행하고 분석하였다. 본 연구의 결과, 서술형 평가 문항의 타당도는 각 문항별로 비교적 높게 나타났다. 채점자간 신뢰도는 세 채점자간에 강한 상관관계가 있는 것으로 나타나 개발된 평가 문항은 타당하고 신뢰할 만한 문항이라고 할 수 있다. 반면, 개발된 서술형 평가 문항에 대한 학업 성취도는 전반적으로 낮았다. 즉, 알고 있는 지식을 자신의 언어로 표현해서 서술하는 것과 정확하고 구체적인 답안을 작성하는 것을 힘들어했다. 또한 서술형 평가에 대해 비교적 긍정적으로 인식하고 있었으나, 서술하는 것에 대한 어려움, 학습량의 증가 등이 학생들에게 서술형 평가를 부담스러워 하는 것으로 인식하였다. 따라서 서술형 평가 방식을 통한 학생들의 평가가 보다 효율적이고 변별력 있게 시행되기 위해서는 서술형 평가를 위한 별도의 학습이나 훈련이 반드시 필요하다고 볼 수 있다. 이를 위해 앞으로 학생들은 수업시간을 통해서 교과 내용과 관련된 교과서 이외의 다양한 자료를 접해보고, 주어진 문제의 해결 방법에 대해 자신의 생각을 정리해보며, 사고를 확장시키고, 이를 글로 서술하여 표현해보는 연습이 요구된다. 그러므로 서술형 평가가 학교 현장에서 공정하고 객관성 있게 시행되기 위해서는 타당도 신뢰도 높은 평가 문항의 개발이 더욱 활발히 이루어져야 하고, 평가 문항의 개발과 관련된 교사들의 자발적이고 적극적인 연수와 연찬을 제안해 본다.

• 재활치료과학
• /
• 제10권3호
• /
• pp.97-110
• /
• 2021

목적 : 본 연구는 Parten의 사회적 놀이의 발달 단계를 바탕으로 학령전기 아동의 사회적 놀이를 측정할 수 있는 평가 문항을 개발하고자 하였다. 연구방법 : 문헌 고찰을 통해 Parten의 사회적 놀이의 발달 단계에 따른 조사 문항을 수집하였다. 이후 아동 작업치료 혹은 놀이와 관련된 치료 경력 7년 이상의 전문가 패널 22명을 대상으로 총 2회의 델파이 조사를 실시하였다. 전문가 패널에게 각 조사 문항에 대한 적절성 여부를 평정하게 한 후 학령전기 아동의 보호자를 대상으로 예비 문항의 내용에 대한 이해도 조사를 실시하였다. 보호자의 예비 문항 이해도 조사 후 전문가 자문 회의를 거쳐 평가 방법을 수립하였다. 결과 : 자료 수집과 델파이 조사를 통해 학령전기 아동의 사회적 놀이는 Parten의 사회적 놀이의 발달 단계인 6개 영역(몰입되지 않은 행동, 방관자적 행동, 혼자 놀이, 평행 놀이, 연합 놀이, 협동 놀이)으로 구성하였고, 몰입되지 않은 행동 12문항, 방관자적 행동 7문항, 혼자 놀이 14문항, 평행 놀이 16문항, 연합 놀이 17문항, 협동 놀이 23문항으로 총 89문항이 도출되었다. 델파이 조사의 평균 내용 타당도 비율은 0.85, 안정도 0.15, 합의도 0.78로 나타났다. 본 연구에서는 연합 놀이 17문항, 협동 놀이 23문항인 총 40문항을 최종 예비 문항으로 구성하였다. 결론 : 학령전기 아동의 사회적 놀이를 측정할 수 있는 평가 문항을 개발하고 내용 타당도를 검증하였다. 향후에는 평가 문항에 대한 타당도를 검증하여 임상에서 평가도구로써 활용되기를 기대한다.

• 대한수학교육학회지:수학교육학연구
• /
• 제18권3호
• /
• pp.335-352
• /
• 2008

본 연구는 수학과 서술형 평가에 관한 문항개발 사례 연구로서 교사들이 학교 현장에서 실제적으로 활용할 수 있는 평가문항과 평가기준을 개발하는데 목적이 있다. 이를 위해 평가문항과 평가기준의 개발절차를 마련하고 초등학교 4-나 단계의 각 단원에 해당되는 구체적인 서술형 평가 문항과 그에 대한 평가기준을 개발하였다. 개발 과정에서 문항의 신뢰도 검증을 위하여 서술형 평가 문항과 평가기준을 초등학교 4학년 학급에 적용한 결과를 분석하였다.