• 영어어문교육
• /
• 제17권4호
• /
• pp.339-356
• /
• 2011

This study explored pre-service English teachers' participation in the development of a rubric and examined evaluation of their own English poetry. The current study would investigate: 1) the pre-service English teachers' perception as a rubric developer and self-evaluator, 2) the number of analytic area that the participants included in their rubrics and the scoring scheme that they designed in their rubrics, and 3) the inter-rater differences between self-assessemnt and expert-assessment across analytic areas. Twenty-four EFL learners participated in the current study. The researchers analyzed the learners' own English poetry, their field notes which contained the process of their writing, their rubrics, scores of self-assessment, and expert raters' scores. The results revealed that learners showed positive responses on learner-directed assessment, that 'content' is the most important area, and that inter-rater difference is small across all analytic areas.

• 한국과학교육학회지
• /
• 제30권2호
• /
• pp.275-290
• /
• 2010

중학생의 과학탐구활동 수행평가 시 총체적 채점과 분석적 채점의 신뢰도를 비교 분석하였으며, 분석적 채점을 하는 경우에는 신뢰도 확보를 위하여 채점척도의 수준을 어느 정도로 분석적으로 해야 하는지를 조사하였다. 중학생들이 작성한 4개의 과학탐구과제에 대한 활동지를 두 명의 채점자가 총체적 채점 방식, 분석적 채점 방식, 분석적 채점 중 채점척도를 2, 3, 4~7수준으로 다르게 하여 채점하였다. 총체적 채점 방식은 과제 간 내적 일치도가 높게 나타났으며, 분석적 채점 방식은 채점자간 신뢰도가 높게 나타났다. 또한 채점척도 3수준의 경우는 4~7수준의 경우와 활동간 내적 일치도와 채점자간의 신뢰도가 유사하게 나타났으나, 능력추정치별 학생의 분포, 문항곤란도 및 문항특성곡선의 경우 채점척도 3수준의 경우가 적절한 것으로 나타났다. 이러한 연구 결과는 과학탐구활동 수행평가 시 총체적 채점 방식을 선택하는 경우는 과제 간 내적일치도를 높일 수 있으며 분석적 채점 방식에 비해 낮게 나타나는 채점자 간 일치도를 높이기 위한 채점자간 협의등 방안이 필요하다는 것을 시사한다. 또한 분석적 채점 방식을 선택하는 경우는 채점척도 3수준으로 충분히 신뢰도를 확보할 수 있다는 점을 시사한다.

• 한국가정과교육학회지
• /
• 제20권3호
• /
• pp.85-105
• /
• 2008

본 연구는 중학교 1, 2, 3학년 가정 교과에서 실험 실습법을 적용한 수행과제 평가도구로써 서술식 채점 기준표인 분석적 루브릭을 교사-학생간의 협상 과정을 통해 개발하는데 목적을 두었다. 본 연구에서는 다음과 같이 정의, 개발, 평가의 3단계 과정을 거쳐 분석적 루브릭을 총 3개, 1학년 [영양김밥 만들기] 2학년 [보조가방 만들기] 3학년 [미래의 나의 공간 꾸미기]를 개발하였다. 정의 단계에서는 루브릭을 개발할 수 있는 준비 단계로 루브릭을 적용할 수행과제를 설문지법을 통해 조사한 후 선정하였으며, 수행과제를 위한 방법 및 절차, 준비물, 유의사항 등을 구체적으로 제시하고, 루브릭 협상 학급 및 개발 일정을 선정 계획하였다. 그리고 Ainsworth와 Christinson(1998)이 제시한 교사-학생 협상 루브릭을 사용하였다. 개발 단계에서는 수행과제의 성취기준을 지식, 기능, 태도로 나누어 확인하고 평가하고자 하는 내용에 따라 채점 준거와 단계를 정하였다. 선정한 채점 준거의 평가기준을 참고로 A, B, C에 따라 구체적으로 관찰 가능하고 평가 가능한 행동으로 루브릭을 기술하도록 하였다. 그리고 모둠별로 작성된 루브릭을 교사-학생간의 협상 과정을 거쳐 1차 루브릭을 개발하였다. 평가 단계에서는 개발한 1차 루브릭의 초안을 가정과교육 전문가 1인에게 내용타당도에 대한 검토를 거쳐 수정 보완하여 최종 루브릭을 제시하였다. 최종 개발된 루브릭 평가 도구의 적합성을 평가하기 위하여 H대학의 교육대학원 학생을 대상으로 임의로 편의 표집하여 46부의 질문지를 분석 자료로 사용하였다. 현장 교사의 설문지 평가 결과 적합성 여부의 결과, 평가도구의 이해도, 타당도, 신뢰도, 활용의 용이성, 교사의 준비도, 결과의 활용도가 비교적 높아 적합한 것으로 판단되었다. 다만 활용의 용이성은 5점 척도에서 3점 이상이나 다른 것에 비해서 상대적으로 낮게 나타났다. 본 연구에서 개발한 루브릭의 활용을 위해 후속 연구를 위해서 다음의 몇 가지 제언을 하고자 한다. 첫째, 후속 연구로서 본 평가도구와 루브릭을 실제로 적용해 보고, 그 효과를 측정해 볼 필요가 있다. 둘째, 가정과에 루브릭에 대한 연구가 많지 않기 때문에 더 많은 영역에서 수행과제에 대한 루브릭이 개발되어 할 것이다. 셋째, 학생들이 루브릭에 대한 이해도가 낮고 학교 현장에서 학생들의 협의 협상하는 토론 능력이 많이 부족하기 때문에 루브릭 개념에 대한 명확한 이해를 도울 수 있도록 사전에 협상하고 토론하는 과정을 단계별로 구체화할 교수-학습 과정안과 보조 자료를 개발할 필요가 있다.

• 대한수학교육학회지:학교수학
• /
• 제6권1호
• /
• pp.21-35
• /
• 2004

고등학교 수학내용에서 학생들이 가장 어려워하는 삼각함수단원을 중심으로 수행평가 도구를 개발하고 이를 현장에 적용하여 효과를 파악하고자 하였다. 평가도구는 Bloom의 인지적 영역을 중심으로 총 12개의 문항으로 구성되었으며 이에 대한 채점 기준표가 구성되었다. 개발된 도구의 적용성을 알기위해 문항에 대한 양호도검사와 다양한 영역에서 성취도 검사가 고등학생, 208명을 대상으로 2003학년 11월 중에 조사되었다. 양호도 검사에서는 본 평가도구가 우수한 것으로 나타났으며, 성취도 검사에서는 남학생이 여학생보다, 과학고 학생이 일반고 학생보다 우수하게 나타났으며, 지역별의 차이는 나타나지 않았다.

• 한국간호교육학회지
• /
• 제23권2호
• /
• pp.135-145
• /
• 2017

Purpose: The purpose of this study was to develop a program outcomes assessment system based on Course Embedded Assessment for nursing education. Methods: This study was conducted in accordance with the procedures of the developmental research method. Results: The major results are as follows. 1) The program outcomes were measured according to the Analytic Hierarchy Process. 2) The Course Embedded Assessment matrix was made according to program outcomes' weight, the curriculum-organizing principle, and achievement levels. 3) The Course Embedded Assessment rubric was developed in logical process, and consisted of a performance criterion, and rating scale. The content validity index of the Course Embedded Assessment rubric was 0.85. 4) An evaluation guideline and 12 documents were developed to facilitate the performance of the assessment system. 5) The average content validity index of the Course Embedded Assessment-based program outcomes assessment system was as high as 0.89. Conclusion: A Course Embedded Assessment-based program outcomes assessment system is more suitable for accreditation of nursing education than previous studies. Because this system evaluates the process of achievement as well as program outcomes, the results can also serve as immediate feedback to improve the educational process. Above all, this system facilitates that students check their achievements and strive to acquire core competencies in nursing.

• 한국가정과교육학회지
• /
• 제21권1호
• /
• pp.35-49
• /
• 2009

본 연구의 목적은 제7차 교육과정 중학교 3학년과 2007 개정 교육과정 중학교 주생활 관련 단원의 수행평가를 위해 학습자 참여 분석적 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보는데 있다. 루브릭 개발 수업은 개별 수행과제로 연구보고서법을 활용하여 '내가 살고 싶은 집'의 루브릭을 개발하는 것으로, 루브릭을 개발하는 과정은 정의, 개발, 평가 단계를 거쳐 이루어졌다. 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보기 위해 중학교 3학년 한 학급씩 실험집단과 통제집단으로 선정하여 독립변인은 루브릭 제시방식으로 종속변인은 학습동기로 하여 총 2차시에 걸쳐 실험이 이루어졌고 사잔 사후 동기검사를 실시하였다. '내가 살고 싶은 집'의 루브릭은 '주거공간의 기본 조건에 대한 개념의 정확성', '적용방법의 적합성', '보고서 제출 마감일 준수'의 3가지 평가항목에 따라 채점기준이 A, B, C 또는 A, B, C, D 척도로 채점기준을 기술하였다. 채점자 간 신뢰도는 모두 높게 나타났다. 루브릭의 개발수업이 학습동기에 미치는 영향을 살펴본 결과 주의집중과 관련성에는 영향을 주지 않았으나 자신감과 만족감에는 긍정적인 영향을 주었다. 개방형 질문의 내용분석 결과에서도 루브릭 개발 수업이 학생의 자신감과 만족감에 긍정적 영향을 미쳤다는 것을 알 수 있었다.

• Journal of Oral Medicine and Pain
• /
• 제30권1호
• /
• pp.35-44
• /
• 2005

본 예비연구는 강의중심학습 (LBL) 방식 과 문제중심학습 (PBL) 방식이 기초의학 지식의 이해력의 향상에 미치는 영향을 사후-사전 검사의 변화량의 차이의 비교를 통해서 그리고 과학적 추론을 동반한 반 구조화된 문제해결의 질에 미치는 영향을 사후 검사의 차이의 비교를 통해서 평가하는 것이 목적이다. 이 반 구조화된 문제는 다섯 개- 샘플 크기, 원인과 결과의 연구설계, 위험요인 구성, 데이터의 통계 분석, 결과 해석- 의 요소를 포함하고 있다. 본 실험은 2004년 이 주에 걸쳐 서울대학교 치과대학 100명의 학부 학생들을 대상으로 실시되었다. 상이한 두 학습들이 실시되기 전 과 후에 감염방지와 예방에 관한 48개의 사지 혹은 오지 선다형의 문제가 학생들에게 주어졌다. 또 두 학습이 종결된 후에 역학관련 반 구조화된 문제를 해결하도록 하는 과제를 통하여 문제해결의 능력에 미치는 두 학습 방식의 영향을 분석하였다. 사전-사후 테스트의 결과 기초의학 지식의 이해 향상 정도는 두 그룹 간의 유 의미한 차이를 보이지 않았다. 반면, 반 구조화된 문제해결의 질은 문제중심학습 방식이 유 의미하게 높았으며 (p=.029), 특히 문제 해결 과정에서 나타난 인과성 연구설계 (p=.000)와 결과 해석(p=.001)에 관한 과학적 추론의 점수가 유 의미하게 우수하였다. 결론적으로 동일한 시간 동안 문제중심학습 방식은 강의중심학습 방식에 비해 하위 기초지식의 이해를 위한 학습 환경에서 불리하지 않았을 뿐만 아니라 상위 인지 활동인 문제해결 과정에서 과학적 추론을 개발하는데 공헌 하였다.