• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.176-189
• /
• 2002

본 연구의 목적은 초등학교 과학과 포트폴리오를 채점할 수 있는 다양한 채점기준을 개발하고, 개발된 각 채점기준의 신뢰도를 검증해 보고자 하는 것이다. 채점기준을 개발하기 위한 포트폴리오는 4학년 2학기 '단원 2. 지층과 화석', '단원 4. 열과 물체의 변화' 를 중심으로 청주교대 과학교육 연구실에서 2000년 여름에 개발한 체제를 같은 해 가을, 경기도 중도시의 한 초등학교 4학년 한 학급에 적용하여 얻은 것이다. 총괄-일반, 총괄-특수, 분석-일반, 분석-특수의 4가지 채점기준을 개발하고, 각 채점기준에 근거하여 학생들이 작성한 포트폴리오 증거물을 채점하여 각 채점 기준별 채점자간 신뢰도와, 채점자내 신뢰도를 구하였다. 1차 채점에서는 총 12명의 채점자들이 각 채점기준별로 3명씩 그룹을 나누어 그룹당 12권의 포트폴리오 증거물을 채점하였다. 단, 분석-특수 채점기준의 경우 6권의 포트폴리오 증거물만을 채점하였다. 채점자내 신뢰도를 알아보기 위해 실시한 채점시기별 신뢰도에서는 l차 채점에 참가한 채점자 중 각 채점기준별로 2명씩 총 8명이 2차 채점에 참가하여 l차 채점과 동일한 방식으로 채점을 실시하였다. 채점결과를 SPSS 통계 프로그램에 입력하여 상관계수를 구한 결과, 총괄-일반 채점기준은 채점자간 신뢰도가 높고 채점자내 신뢰도가 있는 것으로 나타났고 총괄-특수 채점기준은 채점자간 신뢰도와 채점자내 신뢰도가 있는 것으로 나타났다. 분석-일반 채점기준은 채정자간 신뢰도가 높고 채점자내 신뢰도는 있는 것으로 나타났으며, 분석-특수 채점기준은 채점자간 신뢰도와 채점자내 신뢰도가 모두 높은 것으로 나타났다. 일반적인 채점기준들(총괄-일반, 분석-일반)의 경우, 하나의 채점 기준으로 모든 포트폴리오 목표를 채점할 수 있으므로 매우 경제적이고 실용적이나, 채점자들은 채점시 모호함을 느낀다고 하였다. 반면에, 특수적인 채점기준들(총괄-특수, 분석-특수)의 경우, 채점은 더 명확하게 할 수 있으나, 목표별로 채점기준을 개발해야 하므로 많은 시간과 노력이 필요하게 된다. 채점기준의 실용도 측면에서는 분석-특수 채점기준이 다른 기준보다 2배 이상의 시간이 결려 실용도는 낮은 것으로 나타났다.

• 한국과학교육학회지
• /
• 제38권3호
• /
• pp.355-367
• /
• 2018

이 연구의 목적은 학생들의 시스템 사고 수준을 측정하는 문항을 개발하기 위하여 첫째, 문헌 분석을 통해 시스템 사고 수준과 정의를 제시하고 둘째, 시스템 사고 정의와 수준에 근거하여 문항 개발을 위한 Framework을 개발하고 셋째, 시스템 사고 측정을 위한 열린 응답형 검사지를 채점할 수 있는 루브릭을 개발하는 것이다. 이를 위하여 문헌 분석 틀을 적용하여 국외 논문 60편에 대한 문헌 분석을 실시하였으며 분석된 내용을 근거로 시스템 사고 수준과 정의를 제시하였다. 그리고 시스템 사고 수준과 정의에 근거하여 각 수준별 핵심 아이디어와 평가 요소를 포함한 Framework을 개발하였다. 또한 순위선다형 문항 외에 열린 응답형 검사 문항의 채점을 위한 루브릭을 개발하였다. 루브릭은 Hung(2008)이 개발한 시스템 사고 측정을 위한 루브릭에 기반하여 연구팀에서 시스템 사고 수준과 정의에 적합하도록 문항과 위계를 수정하였다. 그리고 각 문항마다 1~5점 척도로 변환이 가능하도록 각 점수에 대한 정의를 제시하였다. 연구팀이 개발한 시스템 사고 수준과 정의, 문항 개발을 위한 Framework, 열린 응답형 검사지 채점을 위한 루브릭에 대하여 과학교육 전문가 7인에게 내용 타당도 검증을 의뢰하였으며 그 결과 CVI가 세 도구에서 모두 .95이상이 확인되었다. 이 연구 결과를 바탕으로 앞으로 학생들의 시스템 사고 수준을 측정할 수 있는 문항을 개발하고 개발된 문항에 대한 구인 타당도 및 준거 타당도 검증을 실시하고자 한다. 나아가 2015 개정 교육과정에서 강조하는 핵심 역량과 관련된 시스템 사고수준의 체계적인 측정을 위한 타당화 연구도 진행하고자 한다.

• 한국지구과학회지
• /
• 제41권6호
• /
• pp.684-694
• /
• 2020

이 연구에서는 이슬점에 대한 중학생들의 개념 이해를 평가하기 위한 루브릭을 개발하였다. 이를 위해 국가 수준 학업성취도 평가의 다층 서답형 문항에 대한 중학생의 응답을 분석하였다. 학생들의 응답 특성에 따라 유형을 분류하고, 성취도 점수 평균에 따른 응답 유형의 분포를 분석하였다. 이를 토대로 이슬점 개념 이해를 평가하기 위한 루브릭을 작성하였다. 연구 결과 다음과 같다: 첫째, 포화수증기량 곡선에서 이슬점 찾기에 대한 학생 응답을 분석한 결과, 다수의 학생들이 이슬점에 대한 개념이 없거나 부족한 것으로 나타났다. 둘째, 이슬점에서 수증기 응결과정에 대한 학생 응답을 분석한 결과, 과학적 개념 유형의 비율은 매우 낮았으며, 오개념 유형의 비율이 상대적으로 높았으며 유형 또한 다양하였다. 셋째, 성취도 점수 평균에 따른 학생 응답 유형 분포 분석을 토대로 4수준의 평가 루브릭을 작성하였다. 이러한 연구 결과를 토대로 지구과학 분야에서 개념 이해 평가를 위한 루브릭 개발과 활용 측면에서 제언을 하였다.

• 정보교육학회논문지
• /
• 제9권1호
• /
• pp.113-124
• /
• 2005

본 연구는 학습자 특성을 고려한 교사의 수행평가기준 선택 및 개발을 돕기 위한 툴의 설계 및 개발을 목적으로 한다. 본 연구에서는 데이터마이닝의 분류 및 연관규칙 탐사 기법을 적용하여 교사의 선택 경향과 학생의 특성에 따른 수행평가 유형을 분석하였으며, 이를 통하여 기존 루브릭의 활용 및 신규개발에 대한 적용 방안을 제공하였다. 학습자의 환경, 관심 및 능력을 고려한 수행평가기준의 개발 및 활용은 데이터마이닝의 "분류"를 통한 학습자 중심의 루브릭 적용으로 가능하다. 또한 교사의 학습영역별로 축적된 루브릭 선택 성향을 연관규칙을 통해 추출하여 교수자의 루브릭 선택을 지원함으로써 수행평가에 소요되는 노력과 시간을 경감시키는 효과가 있다. 수행평가나 루브릭 간의 연관성과 학생의 특성 및 성취도에 따라 수행평가를 분류하는 본 프로그램은 교육행정 정보시스템(National Education Information System; NEIS)의 수행평가 요소와 연계하여 교수자의 루브릭 선택, 변경 및 생성을 지원한다.

• 한국초등과학교육학회지:초등과학교육
• /
• 제28권1호
• /
• pp.9-23
• /
• 2009

This research defined professionality of science teacher from the perspective of PCK. An teaching strategy in the in-service teacher training for the gifted education was proposed based on the definition and implemented at an in-service teacher training program for the gifted education in order to explore about the teaching strategy and suggest practical implications that could improve the program. The in-service teacher training teaching strategy proposed in this research consists of three components: 'crafting activity materials', 'conducting inquiry-based experiment', 'developing rubric for identification of giftedness'. The survey carried out for the participants of the teacher training program showed that teachers perceived the importance of the need for the rubric for gifted identification, developing activity materials for the gifted education in science, and developing the rubric of gifted identification as properties for in-service teacher training programs fur the gifted education. However, the insufficiency of time and opportunities for being fully engaged in such a program made teachers feel lack of self-confidence in developing activity materials for the gifted education in science and rubric for gifted identification. Therefore, teacher training programs reflecting real features of the gifted education should be constantly developed and provided to enhance the effectiveness of in-service teacher training programs.

• 공학교육연구
• /
• 제13권6호
• /
• pp.132-142
• /
• 2010

본 연구에서는 공학인증에서 필수적인 학습성과 평가항목 중 복합학제적 능력평가(학습성과 6)와 의사소통능력(학습성과 7)에 대한 평가방법을 제시하고자 한다. 본 논문에서는 주관적 관점의 팀워크와 의사소통능력을 객관적으로 계량화하기 위해 팀워크와 의사소통능력에 대한 채점기준(Rubric)을 활용하여 평가 기준을 제시한다. 학습성과 6,7번 항목에 해당하는 팀워크와 의사소통능력은 현대 사회의 중요한 사회적 역량으로 사회 및 교육 분야에서 이루어진 많은 연구들은 팀워크와 의사소통능력을 학습을 통해 신장시킬 수 있으므로 사회학적, 교육학적 관점이 함께 논의되어야 한다. 그러나 이 점을 다룬 논문이 매우 드물기 때문에 본 논문에서는 공학인증에서 필수적인 학습성과 6, 7번 항목에 대한 좀 더 타당한 평가 기준을 제시하기 위해 사회 및 교육학적 관점을 함께 제시하고자 하며 예시와 관련교과목을 제시하고자 한다.

• 대한수학교육학회지:학교수학
• /
• 제6권1호
• /
• pp.21-35
• /
• 2004

고등학교 수학내용에서 학생들이 가장 어려워하는 삼각함수단원을 중심으로 수행평가 도구를 개발하고 이를 현장에 적용하여 효과를 파악하고자 하였다. 평가도구는 Bloom의 인지적 영역을 중심으로 총 12개의 문항으로 구성되었으며 이에 대한 채점 기준표가 구성되었다. 개발된 도구의 적용성을 알기위해 문항에 대한 양호도검사와 다양한 영역에서 성취도 검사가 고등학생, 208명을 대상으로 2003학년 11월 중에 조사되었다. 양호도 검사에서는 본 평가도구가 우수한 것으로 나타났으며, 성취도 검사에서는 남학생이 여학생보다, 과학고 학생이 일반고 학생보다 우수하게 나타났으며, 지역별의 차이는 나타나지 않았다.

• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제28권4호
• /
• pp.553-571
• /
• 2014

근래 수학의 학습에서 수학의 내용뿐만 아니라 수학적 과정을 평가할 수 있는 문항의 중요성에 대한 인식이 확산되고 있다. 본 연구에서는 수학의 내용과 더불어 수학적 과정 즉, 수학적 의사소통, 추론, 문제해결을 명시적인 평가요소로 포함하는 서술형 문항으로서 '수학적 과정 문항'이라는 개념을 제안하고, 수학적 과정 문항의 제작을 위한 예시 평가기준과 문항 및 채점기준 개발을 통해 서술형 문항을 활용한 수학적 과정 평가 방안을 논의한다.

• 한국어교육
• /
• 제29권1호
• /
• pp.163-197
• /
• 2018

The present study suggests ways to improve the Korean proficiency screening test through an analysis of WIDA tests. A review of WIDA Screener, WIDA MODEL, and W-APT reveals that each of these three tests consists of four or five tests, corresponding to grade-level clusters. In addition, the WIDA screening tests assess both English for social communication and academic English, according to WIDA's five English Language Development (ELD) standards. Thematic folders of the ELD standards have different ranges of item difficulty, and the WIDA screening tests are adaptive tests. Lastly, the writing tests consist of performance-based tasks, and the rubric is holistic. As suggestions for improvement for Korean screening tests of the KSL curriculum, this study proposes (a) to devise items to assess academic Korean, so as to evaluate students' overall proficiency more accurately, (b) to utilize an adaptive method to screen students' proficiency more efficiently, and (c) to revise the writing tasks and rubric of the current KSL screening tests.

• Human Ecology Research
• /
• 제61권2호
• /
• pp.195-218
• /
• 2023

The purpose of this study was to present a class case that verified the validity, reliability, and usefulness of a portfolio assessment in a cohousing class in the housing area of home economics. To achieve this objective, 241 male and female students in eight classes of the third grade of a junior high school in Gyeonggi-do, Korea, were enrolled in a project class on establishing a cohousing village in which the portfolio assessment method was applied for a total of 10 sessions for approximately four weeks from May 24 to June 16, 2021. To ensure the validity of the portfolio assessment, we designed the lesson after presenting the curriculum goals in detail using the backward design model and developed a specific rubric and conducted all evaluations and feedback based on the rubric to ensure objectivity and reliability. The online tool Padlet was used as a portfolio, which allowed students to easily upload their work, receive feedback from the teacher, and interact with their peers. After the class, the students reflected on the rubric and were generally satisfied with the class using portfolio assessment. This study is expected to facilitate the use of the portfolio assessment method in the classroom, while also supporting student growth and development.