• 제목/요약/키워드: Scoring rubric

검색결과 25건 처리시간 0.047초

WIDA 평가 고찰을 통한 한국어(KSL) 교육과정 진단평가 개선 방안 탐색 (Suggestions for Improvement for KSL Screening Tests: From an Analysis of WIDA Tests)

  • 이인혜
    • 한국어교육
    • /
    • 제29권1호
    • /
    • pp.163-197
    • /
    • 2018
  • The present study suggests ways to improve the Korean proficiency screening test through an analysis of WIDA tests. A review of WIDA Screener, WIDA MODEL, and W-APT reveals that each of these three tests consists of four or five tests, corresponding to grade-level clusters. In addition, the WIDA screening tests assess both English for social communication and academic English, according to WIDA's five English Language Development (ELD) standards. Thematic folders of the ELD standards have different ranges of item difficulty, and the WIDA screening tests are adaptive tests. Lastly, the writing tests consist of performance-based tasks, and the rubric is holistic. As suggestions for improvement for Korean screening tests of the KSL curriculum, this study proposes (a) to devise items to assess academic Korean, so as to evaluate students' overall proficiency more accurately, (b) to utilize an adaptive method to screen students' proficiency more efficiently, and (c) to revise the writing tasks and rubric of the current KSL screening tests.

창의성 신장을 위한 새로운 수학교육 평가 방안에 관한 연구 (A Study on the Development of New Mathematical Evaluation System for Improving Students' Creativity)

  • 박배훈;류희찬;이기석;김인수
    • 대한수학교육학회지:학교수학
    • /
    • 제5권1호
    • /
    • pp.1-25
    • /
    • 2003
  • 본 연구는 창의성 신장을 위한 새로운 수학 교육 평가 방안의 하나로 학교에서 사용될 수 있는 수행평가 방안에 대해 논의한다. 먼저 수행평가의 의미와 필요성을 살펴보고, 수행평가 유형과 채점방법에 대해 논의한 다음 필수·학습 상황에서의 활용방안을 제시한다. 이어서, 초등학교와 중학교에서 활용될 수 있는 수행평가의 종류별 예시 문항과 채점 기준을 소개하며. 각 문항에 대한 성취도 평가 결과를 제시한다. 각 과제에는 내용영역, 평가목표, 평가절차, 준비물, 문항의 특징, 평가상 유의점, 체점 기준표 등을 제시하여 수학교육 현장에서 직접 사용하거나 응용할 수 있도록 한다.

  • PDF

동료평가 정확도 향상 방안의 비교: 평가 기준에 대한 학생들 간 토론 대 전문가 평가 사례 제시 (Student Discussion or Expert Example? How to Enhance Peer Assessment Accuracy)

  • 박정애;박주용
    • 인지과학
    • /
    • 제30권4호
    • /
    • pp.175-197
    • /
    • 2019
  • 고차적 사고를 요구하는 글쓰기는 배운 지식을 활용하고 발전시키게 한다. 학습 장면에서 글쓰기를 더 많이 활용하기 위해서는 동료평가를 도입하는 동시에 동료평가의 정확도를 높일 필요가 있다. 본 연구에서는 동료평가의 정확도를 높이는 방안으로, 평가 기준에 대해 학생들끼리 토론하게 하거나 전문가의 평가를 참고하도록 하는 두 방안을 탐색하였다. 대학생 150명을 대상으로 한 실험 결과, 동료평가 후 전문가의 평가를 참고했던 집단이 평가했던 글을 다시 평가할 때는 평가 정확도가 향상되었지만, 새로운 글을 평가할 때는 향상되지 않았다. 반면에, 동료평가 후 평가 기준에 대하여 토론을 진행했던 집단은 평가했던 글을 다시 평가할 때는 평가 정확도가 향상되지 않았지만, 새로운 글을 평가할 때는 향상됨을 발견하였다. 또한 토론 집단의 경우 평가 기준에 대한 토론에서 총 발언 수가 많아질수록 평가 정확도가 높아졌다. 이상의 결과는 평가 기준에 대한 토론에서 적극적이고 자발적인 논의가 활발할수록 이후 동료평가의 정확도가 향상됨을 시사한다.

교구를 활용한 수학적 과정의 평가모델 개발에 관한 연구 -중학교 수학을 중심으로- (A Study on the Development of the Model for the Process-focused Assessment Using Manipulatives -Focused on Middle School Mathematics-)

  • 고상숙;한혜숙;이창연
    • 한국수학교육학회지시리즈E:수학교육논문집
    • /
    • 제27권4호
    • /
    • pp.581-609
    • /
    • 2013
  • 제 7차 교육과정이후 학생들의 수학 학습을 돕기 위해서 다양한 평가 방법으로 학습 과정 및 수학 수준 등에 대하여 진단해야하는 평가의 중요성이 꾸준히 논의되었다. 본 연구는 2009 개정교육과정에서 강조하는 수학적 과정인 문제해결, 추론, 의사소통 능력을 향상시키기 위해서 교구를 활용한 평가모델을 개발하는 것이다. 우선 교구를 활용한 평가에 적합한 평가원리를 설정하여 각 영역별로 문항과 채점기준표를 개발하고 예비 연구를 실시한 결과 관찰체크리스트의 필요성이 제기되었다. 나아가 예비 연구를 바탕으로 수정된 평가모델을 사용하여 평가를 실시한 결과, 수학적 과정인 각 영역별 특성에 따른 채점기준표에 의해 학생들의 수학적 사고과정을 구체적으로 파악할 수 있어서 목표지향평가가 용이해짐을 알 수 있었다.

과학 교과의 학생 평가에서 ChatGPT의 활용 가능성 및 교사 인식 탐색 (Exploration on the Feasibility of Utilization and Teacher Perceptions of Using ChatGPT for Student Assessment in Science )

  • 이동원;심현표;백종호
    • 한국과학교육학회지
    • /
    • 제44권1호
    • /
    • pp.119-130
    • /
    • 2024
  • 본 연구는 과학 교과의 학생 평가에서 생성형 인공지능인 ChatGPT의 활용 가능성을 탐색하는 데 목적이 있다. 이를 위해 평가 문항을 개발하여 학생들로부터 문항에 대한 응답 자료를 수집하였고, 응답 결과를 ChatGPT에 입력하여 평가의 과정을 수행하도록 하였다. 또한 교사들에게 ChatGPT로부터 얻은 평가 결과를 공유하고, 교사들의 평가 과정과 비교하여 학생 평가에서의 ChatGPT의 활용 가능성을 탐색해 보았다. 연구 결과, 채점 기준의 설정 측면에서 ChatGPT가 생성해 내는 채점 기준이 전반적으로 타당성을 갖추고 있는 것으로 볼 수 있었다. 그러나 ChatGPT가 수행한 채점 결과는 교사들 채점한 결과와 비교하였을 때 일관성이 다소 낮았고, 특히 문항에 포함된 평가 요소가 많고, 평가 요소별 배점 기준이 복잡할수록 채점 결과의 일치도가 더 낮게 나타났다. 학생 응답에 대한 피드백 측면에서는 학생 응답의 과학적 타당성을 평가하는 과정에서 일부 잘못된 내용을 제공하거나 교육과정을 넘어서는 수준의 피드백이 생성되는 경우도 있었으나, 문항에 대한 올바른 답안을 알려주고, 추가적인 사례들을 제공하는 등의 긍정적인 부분도 확인할 수 있었다. 이러한 결과들을 바탕으로 교사들로부터 ChatGPT의 활용 가능성에 대한 인식을 살펴 보았을 때, 학생 평가에서 중요하게 인식되는 '신뢰성' 측면에서 부족한 면이 있기는 하지만, 교사들의 평가를 지원하는 측면에서 활용 가능성을 발견할 수도 있었다. 마지막으로, 이러한 연구 결과를 종합하여 학생 평가에서의 ChatGPT의 활용에 대한 시사점을 제언하였다.

초등수학영재 선발전형에 활용되는 교사 관찰 추천서의 분석 및 평가에 관한 연구 (Study on the Analysis and Evaluation of 'Observation and Recommendation Letter by Teacher' Which is Utilized in Mathematically Gifted Elementary Students Screening)

  • 김종준;류성림
    • 한국수학교육학회지시리즈C:초등수학교육
    • /
    • 제16권3호
    • /
    • pp.229-250
    • /
    • 2013
  • 본 연구의 목적은 최근 영재 선발을 위해서 도입된 관찰 추천 선발제도에서 교사 관찰 추천서의 활용도를 높이기 위하여 현재 영재 선발전형의 일환으로 제출되는 교사 관찰 추천서를 분석하고 적절한 평가 모형을 개발하여 교사 관찰 추천서의 객관성 확보 방안을 마련하는 것이다. 연구 대상은 2012년 D광역시 소재 D대학부설 영재교육원 선발의 1차 전형에 통과한 초등수학영재 60명에 대한 교사 관찰 추천서이다. 연구 결과 교사 관찰 추천서에 나타난 수학 영재행동특성으로 구체적인 사례보다는 피상적인 진술을 하는 경향이 많았으며, 연구자가 고안한 교사 관찰 추천서의 분석 틀에 따라 빈도분석을 한 결과 특정 문항에 집중되는 경향을 보였다. 이는 관찰하고 서술하기 용이한 부분이 있는 반면 그렇지 못한 부분이 있거나 영재의 특성으로 판단하지 않았다는 것을 보여준다. 따라서 관찰 추천을 하기에 앞서 학생의 영재행동특성을 서술할 수 있는 좀 더 세분화된 교사 관찰 추천서 양식의 개발 및 영재의 관찰 추천과 관련된 교사연수가 체계적으로 이루어져야 한다는 것을 보여준다. 또한 교사 관찰 추천서에 나타난 영재행동특성에 대해서 Rubric 모형을 적용하여 점수화한 값을 기반으로 한 채점자간의 신뢰도는 1차 채점 시에는 상관계수가 .641이었고, 채점 과정에 대한 협의를 거친 후 3주 후에 실시한 2차 채점 시에는 .732로 다소 상승하였다. 이는 1차 채점 이후에 협의과정을 거치면서 채점자간의 엄격성을 조정하였으며, 서술형이기에 나타날 수 있는 다양한 상황에서의 세부적인 판단 기준을 세우고, 새롭게 나타난 상황에 대한 점수 부여의 합의점을 찾았기 때문이라고 볼 수 있다. 즉, 초등수학영재 판별을 위해서는 적절한 모형의 개발만큼이나 평가 모형에 대한 채점자들의 엄밀한 이해와 적용이 필요하다는 것을 시사한다.

학습성과 기반 성인간호 임상실습 운영을 위한 임상시나리오 및 루브릭 개발 (Development of Clinical Scenarios and Rubrics for a Program Outcome-based Evaluation for Students' Adult Health Nursing Practice)

  • 양희모;황선영
    • 성인간호학회지
    • /
    • 제26권6호
    • /
    • pp.653-667
    • /
    • 2014
  • Purpose: This study was aimed to develop frequently-used clinical scenarios and scoring rubrics to assess core basic nursing skills in adult health nursing clinical practice for clinical evaluation based on program learning outcomes (PO). Methods: This study was a methodological research combining focus group interviews and questionnaires to select and construct scenarios. Data were collected from clinical practitioners, adult health nursing professors, and new nurses from November, 2013 to April, 2014. The developed scenarios and rubrics were applied to nursing students by way of showing an example. Results: The 12 frequently-used clinical scenarios were developed. The proportion of the evaluation rubrics were 30% for clinical instructors where as 70% for college instructors. In order for students to achieve the important learning outcomes from the courses for clinical practice, four program outcomes (POs) were selected as well as a rubric for each POs was developed. Students who had situation-based clinical practices showed higher levels of satisfaction on mastery of core basic nursing skills and communication skills. Conclusion: This findings of the study suggested the strategies for complementing pitfalls in clinical setting and achieving PO during students' clinical practicum.

Development of Mathematical Task Analytic Framework: Proactive and Reactive Features

  • Sheunghyun, Yeo;Jung, Colen;Na Young, Kwon;Hoyun, Cho;Jinho, Kim;Woong, Lim
    • 한국수학교육학회지시리즈D:수학교육연구
    • /
    • 제25권4호
    • /
    • pp.285-309
    • /
    • 2022
  • A large body of previous studies investigated mathematical tasks by analyzing the design process prior to lessons or textbooks. While researchers have revealed the significant roles of mathematical tasks within written curricular, there has been a call for studies about how mathematical tasks are implemented or what is experienced and learned by students as enacted curriculum. This article proposes a mathematical task analytic framework based on a holistic definition of tasks encompassing both written tasks and the process of task enactment. We synthesized the features of the mathematical tasks and developed a task analytic framework with multiple dimensions: breadth, depth, bridging, openness, and interaction. We also applied the scoring rubric to analyze three multiplication tasks to illustrate the framework by its five dimensions. We illustrate how a series of tasks are analyzed through the framework when students are engaged in multiplicative thinking. The framework can provide important information about the qualities of planned tasks for mathematics instruction (proactive) and the qualities of implemented tasks during instruction (reactive). This framework will be beneficial for curriculum designers to design rich tasks with more careful consideration of how each feature of the tasks would be attained and for teachers to transform mathematical tasks with the provision of meaningful learning activities into implementation.

간호대학생의 임상추론 능력과 학업성취도 (A Study on Clinical Reasoning Ability and Academic Achievements in Nursing Students)

  • 김정아;고자경
    • 한국산학기술학회논문지
    • /
    • 제16권3호
    • /
    • pp.1874-1883
    • /
    • 2015
  • 본 연구는 간호대학생의 임상추론 능력을 확인하고 학업성취도와의 관련성을 파악하고자 시도되었다. 졸업반 4학년 학생 87명을 30팀으로 나누어 2-3명이 한 조가 되어 시뮬레이션을 활용하여 수행한 성인 환자의 수술 후 간호를 녹화하여 분석하였다. 연구자 2명이 개발한 임상추론 루브릭을 사용하여 평가 및 분석한 대학생의 임상추론 능력은 가장 낮은 초보자 수준이 70.1%(61명), 그 다음 양호한 수준이 23%(20명), 우수한 수준이 6.9%(6명)이었으며, 가장 높은 탁월한 수준에 해당하는 학생은 없었다. 또한 간호대학생들의 임상추론 능력은 학업성취도인 총평점평균과 유의한 상관관계가 없었으며, 성인간호학 및 성인간호학 실습 교과목의 평점과는 낮은 유의한 상관관계가 있었다. 따라서 4학년 졸업반 간호대학생들은 졸업 후 신규 간호사가 갖추어야 할 임상추론 능력이 매우 부족하고, 임상추론 능력과 학업성취도 간에 상관성이 확인되지 않았으므로 교육과정 개선이 시급한 것으로 판단된다.

예비 교사들의 맥락 문제 해결 과정 분석 (A Study on the Process of Solving Context Problems by Prospective Teachers)

  • 신보미
    • 대한수학교육학회지:수학교육학연구
    • /
    • 제22권4호
    • /
    • pp.535-555
    • /
    • 2012
  • 이 연구는 예비 교사들의 맥락 문제 해결 과정을 분석함으로써 맥락 문제에 대한 우리나라 교사들의 교과 내용 지식과 관련된 특징을 살피려는 목적에서 진행되었다. 문헌 검토를 통해 맥락의 의미를 살피고 맥락 문제가 갖추어야 할 조건을 추출하였다. 이렇게 추출된 맥락 문제의 조건에 비추어 선형 계획법을 배경 지식으로 하는 검사 문제를 개발하였으며 검사 결과 분석을 위한 주요 관점을 Illinois Department of Education(2005)의 평가 틀에 기초하여 '수학적 지식', '전략적 지식', '설명 능력'의 범주로 구체화하였다. 이렇게 구체화한 분석 관점과 평가 틀을 활용하여 각 예비 교사의 반응 결과에 점수를 부여한 다음 예비 교사들의 맥락 문제 해결 과정에서 드러나는 전반적인 경향을 살피고, 각각의 경향이 갖는 시사점을 검사 문제 개발 의도 및 선행 연구 결과에 비추어 분석하였다. 이상의 분석 결과로부터 예비 교사들의 맥락 문제 해결 과정에서 드러난 특징을 4가지로 요약하였다.

  • PDF