• 한국과학교육학회지
• /
• 제31권1호
• /
• pp.32-47
• /
• 2011

본 연구에서는 학생들의 변인 통제 논리력과 변인 통제 활동을 분석하고자 하였다. 이를 위해 먼저 변인 통제 능력에 대한 구체적인 채점 기준을 개발하였다. 이어서, 중학교 2학년에 재학 중인 30명의 학생을 대상으로 학생들의 변인 통제 유형을 알아보았다. '계단 빨리 왕복하기'전략을 설계하도록 하는 과제를 부여한 후 얻어진 학생들의 응답 내용을 바탕으로 변인 통제 유형을 분석하였다. 변인 통제의 필요성 인식 여부, 불필요 변인의 배제 여부, 통제 변인의 설계 여부, 조작 변인과 종속 변인의 설계 여부의 네 가지 측면에 따라 유형A~유형F의 여섯 가지 유형으로 분류하였다. 그리고 Lawson의 과학적 사고 수준 검사 문항 중 변인 통제 논리에 해당하는 4개 문항에 대한 답변을 본 연구에서 개발한 채점 기준으로 채점하여 변인 통제 논리력을 측정하였다. Lawson이 개발한 과학적 사고 검사지로 측정한 점수와 변인 통제 논리력 점수의 상관 계수는 .67로 과학적 사고력와 변인 통제 논리력의 상관은 높은 것으로 나타났다(p<.01). 이는 본 연구에서 개발한 채점 기준이 학생들의 변인 통제 능력을 객관적으로 평가할 수 있다고 판단할 수 있으며, 또한 학생들의 과학적 사고력을 측정하는데 이용할 수 있음을 의미하는 것이다.

• 한국지구과학회지
• /
• 제41권1호
• /
• pp.48-60
• /
• 2020

이 연구의 목적은 집단중심 추세모형을 적용하여 과학고 학생들이 탐구를 수행하는 과정에서 나타난 통합 탐구 기능 변화의 양상과 특징을 분석하는 것이다. 이를 위해 3개의 가설-연역적 탐구 과제를 이용하였으며, 이를 59명의 과학고 학생들에게 순차적으로 수행하게 하고 그 과정을 보고서로 작성하게 하였다. 작성된 보고서는 Lee and Park(2017)에 의해 개발된 평가 준거틀에 따라 통합 탐구 기능 4개 요소별로 평가하였으며, 이를 집단중심 추세모형에 적용하여 탐구 과제를 수행한 3개 시점에 따른 탐구 기능 수준의 변화 양상을 요소별로 분석하였다. 또한, 탐구 기능 변화에서 나타난 특징을 몇 가지 관점에서 분석하였다. 연구 결과는 다음과 같다: 첫째, 집단중심 추세모형을 적용하여 학생들의 통합 탐구 기능 변화 양상을 분석한 결과, 4개 요소 모두에서 2개 집단으로 분류되었으나 그 변화 양상은 요소별로 많은 차이가 있었다. 둘째, 학생들의 통합 탐구 기능 변화에서 나타난 특징을 분석한 결과, 탐구 기능의 맥락의존성, 탐구 기능 발달 경로의 변이성, 탐구 기능 요소별 수준의 들쭉날쭉성을 발견할 수 있었다. 연구 결과를 토대로 과학고 학생들의 통합 탐구 기능 발달을 위한 제언을 하였다.

• 대한지리학회지
• /
• 제47권6호
• /
• pp.934-954
• /
• 2012

서답형 문항은 장소감, 도해력, 지리적 상상력 등 고차적 사고력을 추구하는 지리과의 주요 목표들에 대한 도달 여부를 측정하는 데에 매우 유용하다. 이 연구는 서답형 문항의 개념을 알아보고 지리과에서 적용 가능한 서답형 문항의 유형들을 구분하여 우리나라에서의 지리과 서답형 문항 개발을 위한 시사점을 도출하고 과제를 제안하고자 하였다. 연구자는 서답형 문항의 개념 정리에 이어서 미국에서 시행되고 있는 NAEP의 지리과 서답형 문항을 사례로 분석하여 유형화를 시도하였다. 서답형 문항은 문항 형식의 차원과 문항에서 평가하는 행동 영역의 차원에서 각각 분류할 수 있었다. 문항 형식의 차원에서는 문두 단독형과 자료 첨부형으로, 행동 영역의 차원에서는 지식 요구형, 이해 요구형, 적용 요구형으로 각각 구분하고 그 특징들을 분석하였다. 이를 통해 서답형 문항의 개발과 적용에 관련된 시사점 및 과제를 다음과 같이 제안하였다. 첫째, 내용 영역과 행동 영역에 정합하는 서답형 문항들을 개발해야 한다. 둘째, 학생들로 하여금 최대한 다양한 종류의 지리 자료들을 활용할 수 있도록 해야 한다. 셋째, 서답형 문항의 성패는 채점의 신뢰도와 밀접한 관련이 있으므로 채점의 단계 구분, 채점 기준, 의사 답안 등에 대한 후속적 연구가 요구된다.

• 한국과학교육학회지
• /
• 제32권1호
• /
• pp.160-181
• /
• 2012

본 연구의 목적은 과학탐구활동 수행평가 시 총체적 채점의 신뢰도를 높이기 위하여 채점자간 불일치의 정도와 유형을 이해하는 것이다. 이를 위하여 중학생 60명을 대상으로 과학탐구 수행평가를 실시하였고, 4명의 훈련된 채점자 채점을 실시하였다. 분산 분석결과 교사 관련 분산성분에 의해 전체 분산의 25%를 설명할 수 있으며, 4명의 채점자중 2명은 관대한 채점자, 2명은 엄격한 채점자의 경향을 지닌 것으로 나타났다. 전체 240 채점 사례 중 4명의 채점자가 모두 일치한 사례는 51사례이다. 채점자간 불일치가 나타나는 189사례에 대하여 채점자 협의를 통하여 확인한 결과, 채점자간 중요하게 생각하는 부분의 차이 때문에 발생하는 불일치 유형1이 38%, 채점자의 관대함과 엄격함에 의해 발생하는 불일치 유형2가 25%, 채점자가 중요하게 생각하지 않은 부분에서 간과하기 때문에 발생하는 등 실수에 의한 불일치 유형3이 31%로 나타났다. 불일치 유형1은 채점자마다 중요하게 생각하는 과제 요소와 평가 요소가 다른 경우로 나누어서 나타났으며, 맥락상의 의미를 강조하는 채점자는 관대한 경향을, 특정 요소를 강조하여 분석적으로 해석하는 채점자는 엄격한 경향을 나타냈다. 불일치 유형 2는 많은 경우 채점 척도의 경계에 학생의 응답에 대하여 나타났으며, 채점자들은 이러한 학생 응답에 대하여 옳은 서술의 개수를 세는 등 분석적인 채점을 수행하는 것을 확인할 수 있었다. 또한 불일치 유형3은 채점자의 실수로 발생하는 불일치로 주로 학생의 응답 중 평가 기준에 부합하는 부분인데 채점자가 중요하게 생각하지 않기 때문에 간과하여 발생하는 것으로 파악할 수 있었다. 이상과 같은 채점자간 불일치를 제어하기 위해서는 채점자가 중요하게 생각하는 과제 요소와 평가 요소에 대하여 사전 및 진행 중 협의를 할 필요가 있다고 판단된다. 또한 총체적 채점을 하는 경우도 각 수준에 해당하는 평가 기준과 함께 경계에 놓인 학생 응답을 변별하는 기준을 제시하는 것이 필요하다. 채점자들은 자신의 채점경향이 엄격한지 관대한지를 파악하고 경계에 놓인 학생의 응답에 대한 판단을 주의 깊게 하여야 불일치를 줄일 수 있다. 실수에 의한 오차를 줄이기 위해서는 여러 명의 채점자가 교차 채점하는 것이 필요하다. 동일한 채점 기준에 대한 채점자의 해석이 다르게 나타나는 경향과 원인에 대한 추후 연구가 필요하다.

• 한국가정과교육학회지
• /
• 제23권3호
• /
• pp.69-90
• /
• 2011

본 연구는 중학교 기술 가정 교과 의생활 영역을 중심으로 타당도 신뢰도 높은 서술형 평가 문항을 개발하여, 이를 학생들에게 적용해보고, 평가 결과를 분석해보는 것에 목적을 두었다. 이를 위해 평가할 내용을 분석하고, 평가 문항을 설계 개발하여 평가를 실시한 후 그 결과를 분석하였다. 목표 이원분류표와 평가 영역 및 평가 목표 설정을 토대로 서술형 평가 문항 초안을 작성하였고, 채점 기준표와 예시답안을 함께 작성하였다. 전문가 검토와 예비 검사를 거쳐, 최종적으로 서술형 평가 문항 총 23개를 완성하였으며, 이를 중학교 2학년 2개 학급 총 65명을 대상으로 본 검사를 시행하고 분석하였다. 본 연구의 결과, 서술형 평가 문항의 타당도는 각 문항별로 비교적 높게 나타났다. 채점자간 신뢰도는 세 채점자간에 강한 상관관계가 있는 것으로 나타나 개발된 평가 문항은 타당하고 신뢰할 만한 문항이라고 할 수 있다. 반면, 개발된 서술형 평가 문항에 대한 학업 성취도는 전반적으로 낮았다. 즉, 알고 있는 지식을 자신의 언어로 표현해서 서술하는 것과 정확하고 구체적인 답안을 작성하는 것을 힘들어했다. 또한 서술형 평가에 대해 비교적 긍정적으로 인식하고 있었으나, 서술하는 것에 대한 어려움, 학습량의 증가 등이 학생들에게 서술형 평가를 부담스러워 하는 것으로 인식하였다. 따라서 서술형 평가 방식을 통한 학생들의 평가가 보다 효율적이고 변별력 있게 시행되기 위해서는 서술형 평가를 위한 별도의 학습이나 훈련이 반드시 필요하다고 볼 수 있다. 이를 위해 앞으로 학생들은 수업시간을 통해서 교과 내용과 관련된 교과서 이외의 다양한 자료를 접해보고, 주어진 문제의 해결 방법에 대해 자신의 생각을 정리해보며, 사고를 확장시키고, 이를 글로 서술하여 표현해보는 연습이 요구된다. 그러므로 서술형 평가가 학교 현장에서 공정하고 객관성 있게 시행되기 위해서는 타당도 신뢰도 높은 평가 문항의 개발이 더욱 활발히 이루어져야 하고, 평가 문항의 개발과 관련된 교사들의 자발적이고 적극적인 연수와 연찬을 제안해 본다.