• 한국가정과교육학회지
• /
• 제23권3호
• /
• pp.69-90
• /
• 2011

본 연구는 중학교 기술 가정 교과 의생활 영역을 중심으로 타당도 신뢰도 높은 서술형 평가 문항을 개발하여, 이를 학생들에게 적용해보고, 평가 결과를 분석해보는 것에 목적을 두었다. 이를 위해 평가할 내용을 분석하고, 평가 문항을 설계 개발하여 평가를 실시한 후 그 결과를 분석하였다. 목표 이원분류표와 평가 영역 및 평가 목표 설정을 토대로 서술형 평가 문항 초안을 작성하였고, 채점 기준표와 예시답안을 함께 작성하였다. 전문가 검토와 예비 검사를 거쳐, 최종적으로 서술형 평가 문항 총 23개를 완성하였으며, 이를 중학교 2학년 2개 학급 총 65명을 대상으로 본 검사를 시행하고 분석하였다. 본 연구의 결과, 서술형 평가 문항의 타당도는 각 문항별로 비교적 높게 나타났다. 채점자간 신뢰도는 세 채점자간에 강한 상관관계가 있는 것으로 나타나 개발된 평가 문항은 타당하고 신뢰할 만한 문항이라고 할 수 있다. 반면, 개발된 서술형 평가 문항에 대한 학업 성취도는 전반적으로 낮았다. 즉, 알고 있는 지식을 자신의 언어로 표현해서 서술하는 것과 정확하고 구체적인 답안을 작성하는 것을 힘들어했다. 또한 서술형 평가에 대해 비교적 긍정적으로 인식하고 있었으나, 서술하는 것에 대한 어려움, 학습량의 증가 등이 학생들에게 서술형 평가를 부담스러워 하는 것으로 인식하였다. 따라서 서술형 평가 방식을 통한 학생들의 평가가 보다 효율적이고 변별력 있게 시행되기 위해서는 서술형 평가를 위한 별도의 학습이나 훈련이 반드시 필요하다고 볼 수 있다. 이를 위해 앞으로 학생들은 수업시간을 통해서 교과 내용과 관련된 교과서 이외의 다양한 자료를 접해보고, 주어진 문제의 해결 방법에 대해 자신의 생각을 정리해보며, 사고를 확장시키고, 이를 글로 서술하여 표현해보는 연습이 요구된다. 그러므로 서술형 평가가 학교 현장에서 공정하고 객관성 있게 시행되기 위해서는 타당도 신뢰도 높은 평가 문항의 개발이 더욱 활발히 이루어져야 하고, 평가 문항의 개발과 관련된 교사들의 자발적이고 적극적인 연수와 연찬을 제안해 본다.

• 한국학교수학회논문집
• /
• 제11권4호
• /
• pp.543-567
• /
• 2008

최근 우리나라 2007 개정 수학교육과정에서는 그동안 강조되어오던 수학적 문제해결력 뿐 아니라 수학적으로 사고하고 의사소통하는 능력을 중요한 요소로 강조하고 있다. 이에 따라 수학과의 평가영역에서는 고등 사고 능력을 평가할 수 있는 대안적인 평가 방법으로 수행평가와 서술형 논술형 평가방법의 구체적인 활용 방안들이 논의되고 있다. 본 연구에서는 초등학교 교과서와 교육과정을 분석하여 <6-나> 단계를 중심으로 서술형 평가 문항과 채점기준을 개발하고 개발된 평가문항을 현장에 적용하여 결과를 분석함으로써 초등학교 수학과 서술형 평가의 현장 적용 가능성을 제시하고자 한다.

• 한국도서관정보학회지
• /
• 제42권4호
• /
• pp.31-50
• /
• 2011

교육에 있어서 평가는 피교육자의 성장과 발달 정도를 확인하고, 교육의 질적 향상을 도모하는 중요한 요소이다. 평가의 방법에는 여러 가지가 있으나 지필시험, 객관식 고사와 같은 전통적인 평가 방식이 갖는 한계를 극복하기 위해서 수행평가가 등장하였다. 수행평가는 피교육자가 과제를 완성한 정도나 상태를 바탕으로 평가하는 방법이다. 정보활용교육은 피교육자의 정보활용능력을 신장하는데 목적이 있으며, 수행평가는 정보활용능력의 상태나 정도를 측정하는데 매우 적합하다. 수행평가를 위해서는 먼저 수행과제가 준비되어 있어야 한다. 그러나 교수자가 수행평가의 요건을 모두 고려하여 수행과제를 개발한다는 것은 쉽지 않다. 이에 본 연구에서는 교수자가 정보활용교육을 전개함에 있어서 수행과제를 쉽게 제작할 수 있도록 수행과제 개발도구를 제안하고자 한다. 본 연구에서 제안한 수행과제 개발 도구는 템플릿 형태를 취하고 있으며, 4단계 즉, 교육목적 및 학습목표, 지식과 기능, 과제 유형, 측정 및 채점기준으로 구성하였다.

• 컴퓨터교육학회논문지
• /
• 제17권4호
• /
• pp.45-57
• /
• 2014

학습자가 주어진 문제를 해결하는 알고리즘을 작성한 후 그것이 정확한지, 그리고 시간 효율적인지를 확인할 수 있는 알고리즘 자동평가 시스템에 대한 연구가 최근 들어 활발히 진행 중이다. 그러나 기존에 연구되었던 시스템은 대부분 프로그래밍 콘테스트를 위한 Online Judge 방식으로 본 연구에서는 교수 학습 기능을 강화한 클라이언트-서버 기반의 시스템을 개발하였다. 특히, 문제해결력 증진을 위한 교수 학습 설계 모델 CRESST을 토대로 학습자의 메타인지와 동기가 활성화되도록 설계하였으며, 알고리즘 자동평가 시스템의 구성요소인 문제, 채점데이터 세트, 자동평가 프로그램, 사용자서비스 환경 등의 전체 시스템을 구현하였다. 본 시스템의 프로그래밍 학습 효과를 분석하기 위해 초 중 고 학생 39명에 대해서 비동질 통제집단 사전사후측정 실험을 실시하였고, 사후검사에 대한 독립표본 T-검정 결과, 실험집단(18명)의 평균점수가 통제집단(21명)보다 유의미하게 높은 것으로 확인되었다. 이것은 본 시스템을 사용한 교수 학습 방법이 전통적인 교수 학습 방법에 비해 프로그래밍 학습에 더 효과적임을 의미한다.

• 한국산업정보학회논문지
• /
• 제9권1호
• /
• pp.92-102
• /
• 2004

자기 주도적 학습능력의 수준별 교육을 위한 평가 방법으로서, 수행평가는 문제해결 능력과 높은 사고 능력평가에 대한 한계점을 극복하고 수업의 질과 학교 정상화를 위한 계획으로 선호되고 있다. 그러나 수행평가는 평가 오류, 채점 공정성 문제, 신뢰도 및 객관성 등의 확보에 어려움 있다. 이런 문제점을 해결하고 수행평가 만족을 높이기 위하여, 본 논문에서는 회계원리 과목을 대상으로 수행평가에 대한 각 영역에서 영향을 주는 인자를 분석하여 퍼지 소속 함수를 설계하고, 이를 적용한 객관적이고 신뢰성 높은 수행평가 방법을 제시하고자 한다.

• 한국산학기술학회논문지
• /
• 제15권10호
• /
• pp.5925-5932
• /
• 2014

본 연구는 선진국의 이원화 제도에 대하여 탐색하고 자격제도에 대한 문헌연구를 통해 다양한 사회 구성원의 추체들이 신뢰하고 인정할 수 있는 한국형 일 학습병행제 자격직종을 개발하여 학벌이 아닌 능력중심사회로 진입을 위한 평가도구를 개발하는데 그 목적이 있다. 연구의 목적을 달성하기 위하여 유형별 자격제도의 관리운영 현황을 분석했으며, 주요 선진국(독일, 영국, 미국, 호주)에서 관리 운영되고 있는 다양한 유형별 관련법, 관련부서, 자격수여 주체, 검정기관, 응시요건, 검정방법, 검정위원회, 검정과목, 합격기준 자격검정 현황을 분석하였고, 직무분석을 통하여 기계(금형)분야의 직무 및 교육내용을 분석하였다. 또한 기계(금형)분야의 출제기준 및 채점 방법을 제시했고, 필기시험과 실기시험에 대한 출제 예시도 제시하였다. 국가차원의 일 학습 병행 자격제도에 관한 기본 틀을 마련하고 방향을 정립하는 초석을 마련하였다.

• 한국과학교육학회지
• /
• 제36권3호
• /
• pp.509-517
• /
• 2016

학생들의 진화에 대한 대안개념(목적론, 용불용설 등)이 과학사에서 나타나는 설명의 발전 형태와 유사하다는 연구는 있었다. 하지만 과학사적으로 설명의 발달과정을 반영하여 부분점수를 주는 평가방식은 활용되지 않았다. 이 연구의 목적은 창조론에서 자연선택까지 과학사적 발달과정을 반영하여 부분점수를 주는 방법을 제안하고 이 방법이 타당한지에 대한 양적인 증거를 수집하는 것이다. 이 연구는 과학사에 근거하여 진화개념검사도구의 학생응답을 순위선다형점수로 변환하고 부분채점모형의 라쉬모델분석을 포함한 통계적 방법으로 새로운 평가방식이 타당한지 확인하였다. 또한 개념발달이 인간, 동물, 문항의 상황에 따라 다른지 확인하였다. Ha(2007)가 개발한 검사도구를 활용하여 1711명의 초, 중, 고등학생과 비전공, 전공생물 교사를 대상으로 생성한 자료를 통하여 분석하였다. 창조론, 목적, 의도, 용불용설, 자연선택에 0점에서 4점씩 부분점수로 제시한 평가방법은 Cronbach alpha를 통한 내적일관성 신뢰도, 라쉬분석의 MNSQ값 등 통한 문항적합도를 확인한 결과 타당한 것으로 확인되었다. 초등학생과 중학생들의 개념수준은 의도에서 용불용설 단계에, 고등학생부터 용불용설 이후의 단계로 개념발달이 이루어지고 있었다. 진화설명의 발달 과정은 인간, 동물, 식물에 따라 차이가 나타남을 확인할 수 있었다. 이 연구는 과학사와 학생들의 개념발달이 유사하다는 기존의 주장에 새로운 양적증거를 추가하고, 진화개념 평가를 위한 새로운 분석방법을 제안한다.

• 대한수학교육학회지:수학교육학연구
• /
• 제25권2호
• /
• pp.157-175
• /
• 2015

교사는 평가하고자 하는 내용에 대한 명확한 이해를 바탕으로 평가방법을 선택하고, 평가의도에 따라 적절한 평가문항을 개발하며, 학생들의 응답을 평가의도에 따라 해석할 수 있는 평가 전문성을 갖추어야 한다. 특히 수학교사는 교육과정에 대한 이해를 토대로 학생의 수학적 지식과 사고를 평가할 수 있는 평가 전문성을 가져야 하는데, PISA의 삼차원 평가틀과 문항은 평가 전문성 신장을 위한 자료로 활용될 수 있을 것으로 보인다. 본 연구에서는 34시간 동안 이루어진 강의에서 예비 수학교사에게 2009 개정 수학과 교육과정의 내용 영역과 수학적 과정, PISA 2012 평가틀의 맥락을 축으로 갖는 평가틀을 제시하고, 이 평가틀을 토대로 1, 2차에 걸쳐 문항을 개발하도록 하였다. 개발 문항을 분석한 결과, 수학적 내용에 대한 충분한 이해를 토대로 수학적 과정과 맥락을 평가하는 문항을 개발하고, 상세한 채점 기준을 개발하는 평가 전문성이 신장하였음을 확인할 수 있었다.

• 컴퓨터교육학회논문지
• /
• 제9권3호
• /
• pp.85-96
• /
• 2006

본 연구의 목적은 ICT를 활용한 문제 해결 과정에서 학습자의 기능 및 논리적인 사고의 경향성을 밝히고, 이를 통하여 ICT 활용 교육의 목표와 본질적인 가치를 추구하기 위하여 교수-학습과정에서 어떠한 노력이 필요한지 연구하는 데에 있다. 연구 방법으로 문서 작성 프로그램을 사용하여 학생들에게 탐구문제의 텍스트 자료를 표와 차트로 변환하는 수행 평가를 실시하였고, 이 수행 과정에서 요구되는 사항을 기능적인 영역과 논리적인 영역으로 작성한 기준 항목에 따라 3차에 걸쳐 채점을 하였다. 연구의 결과 전반적으로는 학생들이 프로그램을 시용할 때 기능과 논리 영역 중 기능적인 부분에서 더 중점적으로 사고를 하는 경향이 나타났으며, 전공이나 학년, 컴퓨터 실력, 자격증 보유 여부 등에 따라서도 기능적인 영역에서 우수한 것으로 확인되었다.

• 기술혁신학회지
• /
• 제12권3호
• /
• pp.614-637
• /
• 2009

국가연구개발사업의 투자효율성을 높이기 위해서는 무엇보다도 평가시스템이 잘 갖춰져야 한다. 왜냐하면 혹시라도 특정 평가자에 의해 평가결과가 왜곡 된다면 정부가 바라는 최적의 연구팀을 선정하지 못할 것이고, 이로 인해 바람직한 연구성과를 기대하기 어려울 것이기 때문이다. 현행 국가연구개발사업 평가과정에서는 특정 평가자의 편견(특이치)을 차단하기 위해 대부분 최고/최저점 제외방식을 사용하고 있다. 그러나 우리가 관례적으로 사용하고 있는 이 방식에 한계가 있을 수 있다. 따라서 본 연구에서는 실증분석을 통해 이 방식이 갖고 있는 한계에 대한 문제점을 도출하고, 이를 보완할 수 있는 현실적 대안을 제시함으로써 국가연구개발사업 평가제도의 신뢰성 제고 방안을 모색하였다. 이러한 결과들은 피 평가자들의 평가결과에 대한 수용도 제고 및 국가연구개발사업 효율성 증진에 기여할 수 있을 것이다. 또한 순위결정의 방법론 측면에서 다양한 분야에 도움을 줄 것으로 기대된다.