• 한국수학교육학회지시리즈A:수학교육
• /
• 제57권1호
• /
• pp.55-74
• /
• 2018

The purpose of this study is first to examine the relative influence of each error source and to investigate the optimal measurement conditions to ensure satisfactory multiple reliability coefficients based on the teaching aptitude and personality test for pre-service teachers. Participants were 33 students enrolled in mathematics education in a graduate school of education located in the Seoul metropolitan area from 2013 to 2017. The main results were as follows. First, the estimated variance due to residual was highest, followed by nesting of items within domains, graduate students, interactions of graduate students with domains, and domains. Second, total 96 items, with 12 domains containing 8 items in each domain, with cut score of 598, and original 210 items, with 14 domains containing 15 items in each domain, with cut scores of 615 or 716 were optimal measurement conditions to reach acceptable reliability levels based on the joint consideration of dependability coefficients, cut score dependability coefficients, adjusted dependability coefficients, and standard errors of measurement. Third, larger deviations between the arithmetic mean and the cut score indicated higher reliability coefficients of the test results. Finally, this study suggests ways for practitioners to consider how to apply generalizability theory for criterion-referenced tests and how to develop future research based on limitations.

• 한국수학사학회지
• /
• 제24권3호
• /
• pp.145-163
• /
• 2011

수학 학습에서 학생들의 정의적 성취 여부를 판단할 수 있도록 본 연구는 준거 참조 평가의 준거인 기준 점수를 설정하였다. 타당도와 신뢰도가 확보된 표준화된 정의적 성취 검사 도구에 대하여 변형된 Angoff 방법을 적용하였고 수학교사 전문가 협의회를 통하여 합의된 점수가 설정되었다. 이 점수는 학습지향성, 자기통제, 불안, 흥미, 가치인식, 자신감의 6가지 요소에 대하여 각각 설정되었다. 학습지향성은 20점 만점에 기준 점수가 12점, 자기통제는 24점 중 14점, 불안은 16점 중 11점, 흥미는 20점 중 13점, 가치 인식은 24점 중 16점, 자신감은 16점 중 10점이었다. 우리나라 중학교 2학년 학생들은 수학에 대한 가치 인식을 성취한 비율이 가장 높았고, 성별이나 수준별 수업 시행 여부 별로 정의적 성취 비율의 차이는 나타나지 않았다.

• 한국산학기술학회논문지
• /
• 제19권5호
• /
• pp.323-330
• /
• 2018

본 연구는 측정학적 특성을 바탕으로 교육과학기술부에서 표준안으로 보급한 교직 적성 인성 검사를 교육대학원의 예비공학교사에게 실시하는 것이 적절한지를 살펴보며, 교직 적성 인성 검사가 적정 수준의 신뢰도에 도달할 수 있는 효율적인 측정 조건을 제시하였다. 이를 위해 수도권에 소재한 한 교육대학원에서 2013년부터 2017년까지 공학교육전공의 예비공학교사 99명을 대상으로 실시한 교직 적성 인성 검사자료에 일반화가능도 분석을 수행하였다. 주요 분석결과는 다음과 같다. 첫째, 교직 적성 인성 검사점수에 미치는 요인의 상대적인 영향력은 일반적으로 잔차, 영역 내 문항, 피험자, 피험자와 영역의 상호작용, 영역, 그리고 시행횟수 크기의 순으로 나타났다. 둘째, 고전검사이론을 바탕으로 한 Cronbach's ${\alpha}$는 측정 구조를 적합하게 반영하지 못함으로써 과대추정 될 수 있으므로 준거참조검사에서는 의존도계수와 같은 보다 정밀한 신뢰도를 추정할 필요가 있다. 셋째, 교직 적성 인성 검사 표준안은 의존도계수를 바탕으로 교육대학원의 예비공학교사에게 적용 가능하다는 경험적 근거를 제시하였다. 넷째, 교직 적성 인성 검사가 적정 수준의 신뢰도에 도달할 수 있는 효율적인 측정 조건은 총 문항 수를 기준으로 시행횟수는 2회, 영역은 12개, 그리고 영역 내 문항은 8개로 원자료인 총 210개 문항을 96개로 축소할 수 있는 것으로 나타났다. 마지막으로 본 연구의 제한점과 후속 연구를 위한 방향을 제시하였다.