• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국지구과학회지
• /
• 제26권6호
• /
• pp.511-523
• /
• 2005

본 연구에서는 한국 지구과학 올림피아드 문항의 질 향상 방안을 모색하고자 1회와 2회 예선 및 본선 문항을 다양한 측면에서 분석하였다. 문항 분석을 위해 내적 및 외적 문항 분류틀을 구안하여 적용하였다. 고전 검사이론을 적용하여 문항의 난이도와 변별도, 상관계수, 그리고 신뢰도를, 일반화가능도 이론을 적용하여 일반화가능 도를 각각 추정하였다. 문항 분류틀 적용 결과는 다음과 같다: (1) 내용 차원에서는 지질 영역과 천문 영역에, 지식 및 탐구과정 차원에서는 자료 분석 및 해석에 집중되는 경향을 보였다. 또한 맥락 차원에서는 거의 대부분의 문항이 교과서적인 상황을 토대로 한 것이었다. (2) 요구 사고 수준에서 예선과 본선간의 차이를 발견할 수 없었다. (3) 문항 표현 범주에서는 그림의 사용 비율이 가장 높았고, 문항 유형 범주에서는 예선은 선다형과 단답형의 비율이, 본선은 서술형의 비율이 높았다. 또한 문항 형식 범주에서는 중학부와 예선은 단독형의 비율이 높고, 고교부와 본선은 복합형의 비율이 높았다. 문항을 분석한 결과는 다음과 같다: (1) 중학부는 대체로 난이도가 낮고, 변별도는 적절하였다. 그러나 고교부는 일반고와 과학고간에 상당한 차이가 있었다. (2) 중학부는 대기 영역과 총점과의 상관이, 고교부는 천문 영역과 총점과의 상관이 가장 높았다. (3) 양호한 문항이 가장 많은 일반고부의 문항 내적 일관성신뢰도와 일반화가능도가 가장 높았다. (4) 일반 고는 출제된 문항 수로 적정 수준의 일반화가능 도에 도달되나, 중학부나 과학고는 출제된 문항보다 2배 이상 많은 문항수가 필요한 것으로 나타났다.

• 한국가정과교육학회지
• /
• 제19권3호
• /
• pp.149-168
• /
• 2007

본 연구의 목적은 가정과 임용시험 문항 중에서 교과교육학 문항수준 즉, 문항의 출제비율, 문항형태, 문항의 행동영역, 내용의 포괄성의 분석을 통해 가정교과교육학 문항의 문제점을 파악하고 개선방안을 도출하는 데 있다. 이를 위하여 2001-2007 학년도까지의 가정과 임용시험 문항 중에서 교과교육학 문항을 대상으로 문항의 출제비율, 문항형태는 빈도와 비율을 통해, 문항의 행동영역, 내용의 포괄성은 내용분석방법을 통하여 분석하였다. 또한 가정교과교육학 문항의 개선방안을 제안하기 위하여 2001-2007 학년도까지의 과학군, 사회군 교과교육학 문항 중에서 사례문항을 추출하여 논의하였다. 본 연구의 결과를 종합하면 다음과 같다. 첫째, 가정교과교육학 문항의 출제비율은 2001-2004학년도까지 20-30%로 유동적이었으나 2005학년도 이후 30%로 고정적인 비율을 보였으며 가정교과교육학 각 하위영역의 출제비율은 교육과정(43%), 교수학습법(35%), 교육평가(19%), 교육철학(3%) 순이었다. 둘째, 가정교과교육학 문항형태는 2001-2004학년도까지 단독문항의 형태와 소문항을 포함한 형태의 문항이 양립하였으나 2005-2007학년도 문항형태는 100% 단독문항의 형태로 변화되었다. 셋째, 가정교과교육학 하위영역 문항의 출제내용을 살펴보면 다음과 같다. 교육과정 출제내용은 제7차 교육과정 해설서의 내용이 대부분이었고 교수학습법 출제내용은 특정 교수학습모형에 관한 내용이 주를 이뤘다 교육평가에 관한 문항의 출제내용은 수행평가에 관련된 내용이 주로 출제되었다. 마지막으로 가정과교육철학에 관한 문항은 2005학년도에 가정과 사명에 나타난 하버마스의 세 행동체계에 관한 내용이 유일하게 출제되었다. 넷째, 가정교과교육학 문항의 행동영역을 살펴보면 다음과 같다. 가정과교육과정 문항의 행동영역은 대다수의 문항이 '단순지식 또는 기억' 수준에 머물러 있어 구체적인 개선방안으로 교육과정의 내용을 조망하는 시각으로 이해하여 실제적 인 교육현장에서의 적용능력을 평가할 수 있는 '복합지식 또는 이해와 적용'의 행동영역을 제안하였다. 가정과교수학습법 문항의 행동영역은 대체로 '복합지식 또는 이해와 적용'으로 나타났으나 좀 더 발전적인 문항의 개선방안으로 특정 교수 학습법에 대한 개념과 원리의 이해만을 요하는 문항의 행동영역에서 좀 더 실제적인 수업상황에서 교수학습이론을 폭넓게 적용하는 '적용' 능력을 좀 더 요하는 문항의 행동영역을 제안하였다. 가정과교육평가 문항의 행동영역 역시 대체로 '복합지식 또는 이해와 적용'을 요하는 문항의 행동영역이라고 볼 수 있으나 좀 더 발전적인 문항으로의 개선방안으로 이론적인 내용의 '이해'만으로 해결할 수 있는 문항의 행동영역에서 가정과의 실제 수행평가 상황에 맞는 평가도구를 찾아 제작하고 활용할 수 있는 '적용' 능력을 요하는 문항의 행동영역을 제안하였다. 다섯째, 가정교과교육학 문항내용의 포괄성을 살펴보면 다음과 같다. 가정과교육과정 문항내용은 제7차 교육과정 문서상에 표면적으로 제시된 내용에 한정되어 있어 구체적인 개선방안으로 교육과정의 철학적 이론적 배경, 다양한 교육과정 원리를 활용하는 문항내용 등과 같이 좀 더 이론적이고 원론적인 내용으로의 확대를 제안하였다. 가정과교수학습법 문항내용은 특정 교수학습모형에 관련된 지식을 묻는 내용으로 주로 출제되었다. 이에 구체적인 개선방안으로 특정 교수학습모형의 이론적 토대가 되고 전체적인 교수설계를 하기 위한 기본 바탕이 될 수 있는 교수학습이론에 관한 내용, 또한 현재가정과교육에 있어서 유용한 교수학습법이라고 입증되고 있는 실천적 추론 가정과 수업에 관한 내용으로의 확대를 제안하였다. 가정과교육평가 문항의 출제는 대다수의 문항이 수행평가에 관한 문항내용으로 출제되었다. 이에 구체적인 개선방안으로 문항의 변별도 여부의 판단, 평가문항의 내용 타당도 분석, 평가결과를 해석하는 능력, 평가자의 철학적 관점과 같은 내용으로의 확대를 제안하였다.

• 한국가정과교육학회지
• /
• 제24권2호
• /
• pp.135-154
• /
• 2012

본 연구의 목적은 2002년도부터 2011년도까지 10년간의 가정과 '임용시험 문항'(이하 '총 문항'이라 칭함)을 대상으로 분야별 출제 비율 분석, 평가 내용 요소(이하 '평가 요소'라고 칭함)에 따른 문항 분석, 임용 상세화 기준 개발 이전과 이후의 분야별 평가 내용 요소를 분석하는데 있다. 연구 결과를 요약하면 다음과 같다. 첫째, 가정과교육학 분야의 분석 결과 총 문항 중 30.9%의 비중을 차지했으며, 최근에는 35%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '가정과 교수 학습 방법의 실제'(33.2%)가 가장 높았으며, '가정과교육의 본질'(3.2%)은 가장 낮았다. 둘째, 식생활 분야의 분석 결과 총 문항 중 17.5%의 비중을 차지했으며, 최근에는 15%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '조리원리 실습'(26.1%)이 가장 높았으며, '식생활 문화'(3.7%)는 가장 낮았다. 셋째, 의생활의 분야의 분석 결과, 총 문항 중 15%의 비중을 차지했으며 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제비율을 보면 '의복 관리'(25.1%)와 '의복 및 생활용품 제작'(25.1%)이 가장 높았으며, '의복의 선택과 자기표현'(3.0%)은 가장 낮았다. 넷째, 주생활 분야의 분석 결과, 총 문항 중 11%의 비중을 차지했으며 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별로는 '주거생활문화의 이해'(22.5%)가 가장 높고, '주거실내디자인의 이해'(10.7%)는 가장 낮았다. 다섯째, 소비생활 분야의 분석 결과, 총 문항 중 12.4%의 비중을 차지했고, 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '가정자원관리'(34%)가 가장 높았으며, '생애설계와 가정복지'(0%)에서는 전혀 출제되지 않았다. 여섯째, 가족생활 분야의 분석 결과 총 문항 중 13.3%의 비중을 차지했고, 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율은 '가족에 대한 이해와 가족의 변화'(23.8%)가 가장 높았고, '결혼과 가족발달'(2%)은 가장 낮았다. 마지막으로, 전반적으로 임용 상세화 기준의 개발은 가정과 중등 임용 시험의 평가 영역별 내용 요소의 균등화와 다양화의 문제를 다소 완화하였다.

• 과학교육연구지
• /
• 제38권3호
• /
• pp.670-690
• /
• 2014

이 연구는 고등학교 생명 과학 I의 지필평가 실태를 조사하기 위하여 일반계 고등학교 10개교를 임의로 선정하여 2013학년도 생명 과학 I의 문제지 33부(선택형 문항 690개, 서답형 문항 162개)를 분석하였다. 문항에 대해서는 Bloom의 신 교육목표 분류체계의 틀과 국가수준 학업성취도 평가의 과학과 평가틀에 근거하여 분류하였다. 선택형 문항의 경우 실제 정답률과 이원목적분류표에 제시된 난이도를 비교하였고, 서답형 문항의 경우 문항유형에 따른 문항 수와 배점을 비교하였다. 서답형 문항 중 서술형 문항에 대해서는 반응의 허용 정도, 자료 제시 여부, 출제 형식에 따라 구분하였다. 지필평가 문항 분석 결과, 서답형 문항의 비율이 19.0%로 선택형 문항의 비율(81.0%)보다 낮았다. Bloom의 신 교육목표 분류체계에 의한 분석 결과, 지식 차원에서 '개념적 지식'에 해당되는 문항이, 인지과정 차원에서 '이해하다'에 해당되는 문항이 많았다. 국가수준 학업성취도 평가의 과학과 평가틀에 의한 분석에서 '지식' 영역에 해당되는 문항이 '탐구' 영역에 해당되는 문항보다 약 9배 많았다. 선택형 문항에서 이원목적분류표에 제시된 난이도와 실제 정답률을 비교한 결과, 일치하는 비율은 41.5%였다. 서답형 문항의 유형에 따른 문항 수의 비율을 비교한 결과, 단답형 문항의 비율이 34.0%였고, 그리기 문항은 '세포와 생명의 연속성' 단원에서 주로 출제가 되었다. 서술형 문항에서 반응의 허용 정도에 따라 분류한 결과, 모두 '응답 제한형'에 해당되었고, 그 중 '내용범위 제한형'(67.3%)에 해당되는 문항이 가장 많았다. 그리고 자료 제시여부에 따라 분류한 결과 '자료 제시형'(65.4%)에 해당되는 문항이, 출제 형식에 따라 분류한 결과 '지식 서술형'(80.4%)에 해당되는 문항이 가장 많았다. 이 연구 결과를 통하여 학교 현장에서 '탐구' 영역에 해당되는 문항을 더 많이 출제할 필요가 있으며, 서술형 문항의 실제적 비중을 높이면서, 다양한 유형으로 출제할 필요가 있다고 생각된다.

• 컴퓨터교육학회논문지
• /
• 제21권4호
• /
• pp.29-37
• /
• 2018

본 논문에서는 최근 3년 동안 시행된 정보 컴퓨터 표시과목 임용시험의 기출문항을 13개 기본이수과목으로 분류하고, 과목별 점수 및 문항수의 구성을 분석하였다. 이와 함께 기본이수과목 중에서 출제비율이 높은 6개 과목에 대해 평가영역별 점수 구성을 분석하였다. 그리고 교과내용학 분야에서 C언어를 사용한 문항들이 차지하는 점수 비중을 조사하였다. 분석 결과에 따르면, 첫째, 교과내용학 분야에서 과목별 점수 비율은 0~17.1%, 문항수 비율은 0~15.8%로 나타났다. 이와 함께 3개 과목은 연도별 점수 편차가 큰 것을 확인하였다. 둘째, 분석 대상 과목들의 평가영역별 점수 비율은 0~52%로 분포되어 영역별로 편차가 큰 것으로 나타났다. 셋째, 최근 3년 동안의 임용시험에서 C언어를 사용한 문항의 점수 비율은 평균 33%로 매우 높게 나타났다. 본 연구에서는 이러한 분석 결과를 바탕으로 개선 방안을 제안하였다.

• 과학교육연구지
• /
• 제38권1호
• /
• pp.168-181
• /
• 2014

이 연구에서는 초 중 일반계 고등학교 과학과 평가의 실태를 고찰하고자 하였다. 이를 위해 초등학교 60개교, 중학교 40개교, 일반계 고등학교 20개교를 표집하여 설문지를 발송하였고, 초등학교 교사 292명, 중학교 교사 110명, 고등학교 교사 116명, 총 518명의 응답 결과를 얻었다. 설문 조사 결과, 학교급이 올라갈수록 지필평가의 비율이 늘고 수행평가의 비율이 줄어들고 있었다. 그리고 과학과 지필평가에서 서술형 문항의 비율이 선다형 문항에 비해 낮았고, 중 고등학교는 초등학교와 비교할 때 선다형 문항의 비율이 높았다. 또한 지필평가에서 지식 영역과 탐구 영역의 출제 비율을 살펴본 결과, 학교급, 성별, 교직 경력과 상관없이 모두 지식 영역이 탐구 영역보다 출제 비율이 더 높았다. 채점 시간을 고려하여 서술형 문항을 제한된 범위에서 실시하는 경우가 많은데, 이러한 경향은 초등학교보다 중 고등학교에서 더 많이 나타났다. 교사들은 서술형 문항을 개발하여 실시함으로써 학생들의 이해 수준을 파악할 수 있음을 잘 인식하고 있는 경우도 있지만, 서술형 문항에 대한 채점 결과를 신뢰하기 어려워서 서술형 문항을 제대로 개발하지 않는 것으로 나타났다. 한편 고등학교의 경우 수행평가를 실시 목적에 맞게 실시하는 비율이 가장 낮게 나타났다. 교사들은 학생들의 다양한 능력을 평가하기 위해 수행평가를 실시 목적에 맞게 실시하는 경우도 있지만, 수행과 관련되어서만 평가하고 시간과 노력이 많이 필요해서 수행평가를 형식적으로 실시하는 경우도 있었다. 학교 현장에서 수행평가가 실시 목적에 맞게 실시되고 서술형 평가가 정착되며 탐구 영역의 출제가 원활하게 이루어지도록 교사 연수, 실험과 평가 지원을 위한 조교 배치 등 행 재정적 지원이 필요하다.

• 대한공업교육학회지
• /
• 제36권2호
• /
• pp.219-238
• /
• 2011

본 연구의 목적은 임용시험에서 공업교과교육학 문항의 출제 경향과 문제점을 파악하고 구체적인 개선방안을 도출하는 데 있다. 이를 위하여 2002학년도부터 2011학년도까지 공업계열(건설, 기계 금속, 전기 전자 통신, 화공 섬유) 임용시험 전공영역평가 중 교과교육학 문항을 대상으로 문항 분석을 실시하였으며, 연구의 결과는 다음과 같다. 첫째, 공업교과교육학 출제 문항수와 배점 비율을 살펴 본 결과, 2002-2004학년도, 2005-2008학년도, 2009-2011학년도를 분기로 공업교과교육학의 비중이 증가하였으며, 최근 2010학년과 2011학년에는 출제 문항수와 배점이 모든 공업교과에서 통일된 것으로 나타났다. 둘째, 2002-2011학년도까지 공업교과교육학 하위영역별 문항의 배점 비율을 분기별로 분석한 결과, 분기별로 교과교육학 관련 문항 수가 증가함에 따라 다양한 공업교과교육학 하위영역의 문항들이 출제되었고, 최근에는 하위 영역들 중 2개 이상의 영역이 포함된 '복합' 영역 문항의 출제 비율이 높아졌다. 셋째, 교수내용지식의 관점에서 2009-2011학년도까지 과학교과군(공통과학, 물리, 화학, 생물, 지구과학)의 교과교육학 문항과 공업교과교육학 문항의 내용을 분석한 결과, 교수내용지식의 반영 비율이 공업교과군의 경우에 해마다 증가하고는 있으나, 과학교과군에 비해 낮은 것으로 나타났다.

• 과학교육연구지
• /
• 제44권1호
• /
• pp.38-49
• /
• 2020

본 연구의 목적은 고등학교 물리 I '시공간과 우주' 단원의 지필평가 문항과 교과서 목표가 인지영역과 내용영역에서 어느 정도 유사한지를 분석하기 위한 것이었다. 9개의 고등학교에서 출제한 지필고사 문제지와 평가원에서 출제한 문항 중에서 물리 I의 첫번째 단원인 '시공간과 우주'에 해당하는 문항들을 분석하였다. 문항의 분석기준으로 교육과정 성취기준에 제시된 내용영역들과 교과서에 진술된 목표들을 사용하여 살펴보기 위해 성취기준에 따라 내용영역을 11개로 분류하였고, 인지영역 수준은 지식, 이해, 적용의 틀로 각각 분류하였다. 결론적으로 학교에서 출제된 문항에서는 적용능력을 평가하는 문항의 비율이 낮았으며, 내용영역간 분포에도 불균형이 나타났다. 비율차 지수를 통한 비교에서는 교과서에 제시된 학습목표와 학교 출제 문항은 유사성이 매우 높았지만, 교과서 목표와 평가원 출제 문항을 비교하였을 때는 유사성이 낮았다. 이상을 바탕으로 평가문항의 타당성을 높이기 위한 몇 가지 제언을 하였다.

• 한국학교수학회논문집
• /
• 제16권4호
• /
• pp.899-925
• /
• 2013

이 연구의 목적은 고등학교 정기고사에 제시된 수학 서술형 평가 문항이 2007개정 교육과정의 성격과 목표에 얼마나 잘 부합되는지 살펴보는 것이다. 따라서 이 연구를 위해 서울과 경기지역을 중심으로 24개 학교에서 제시된 서술형 평가 문항이 학생들에게 어떠한 인지적 노력수준을 요구하고 있는지 수학과제 분석하였고, 또한 서술형 평가 문항이 학생들에게 어떠한 능력을 요구하는지 살펴보기 위해 수학적 숙련도를 통해 서술형 문항을 분석하였다. 총 199문항의 서술형 평가 문항을 분석한 결과 학생들에게 낮은 인지적 노력수준을 요구하는 문항은 70%의 비율로 나타났고, 높은 인지적 노력수준을 요구하는 문항은 30%의 비율로 나타났다. 이러한 결과는 본 연구에서 살펴본 대부분의 서술형 평가 문항이 계산 과정을 포함하고 있었으며 단순한 알고리즘을 통해 문제를 해결하는 특징을 가지고 있음을 보여준다.