• 제목/요약/키워드: written test item

검색결과 24건 처리시간 0.025초

발성 사고법을 이용한 예비 화학 교사의 지필평가 문항 제작 과정의 특징 분석 (An Analysis of the Characteristics of the Processes of Pre-Service Chemistry Teachers in Making Written Test Items Using Think-Aloud Method)

  • 노태희;김혜리;한재영;강훈식
    • 한국과학교육학회지
    • /
    • 제37권2호
    • /
    • pp.225-237
    • /
    • 2017
  • 이 연구에서는 예비 화학 교사가 개별적으로 지필평가 문항을 제작하는 과정의 특징을 분석하였다. 이를 위하여 8명의 예비 화학 교사가 기체 법칙에 대한 6개의 지필평가 문항을 제작하는 발성 사고 과정과 개별 심층 면담 전사본을 분석하였다. 분석 결과, 예비교사들은 지필평가 문항 제작 과정에서 문항 제작 계획 단계의 체계성 부족, 수업과 평가의 상호관련성에 대한 인식 및 고려 부족, 문항 유형 결정 기준의 다양성, 문항의 행동 영역과 난이도 판별 곤란, 교사용 지도서 활용의 제한성과 교사용 지도서에 대한 오해, 검토 관점과 내용의 제한성 및 검토시기에 따른 차이점 등의 6가지 특징을 보였다. 이는 예비교사의 지필평가 문항 제작 능력을 향상시키는 방안을 모색하는 데 의미있는 시사점을 제공할 수 있다.

중학교 과학과 1학년 물질 분야의 지필평가 문항의 정보제시 오류 분석 (Errors on Written Tests of Science in Middle School 7th Grade: Matters)

  • 박현주;신주란
    • 대한화학회지
    • /
    • 제54권6호
    • /
    • pp.781-786
    • /
    • 2010
  • 이 연구는 중학교 1학년 과학과 지필평가 문항 중 물질 분야 문항에 나타난 정보제시의 오류와 오류 유형별 빈도수를 조사 분석하였다. 중학교 1학년 과학과 물질 분야 문항에서 조사된 정보 제시 오류 유형은 불충분한 정보, 불필요한 정보, 잘못된 정보, 교육과정 내용을 초월한 정보, 불명확한 정보 등의 다섯 가지로 나타났다. 분석한 167개의 문항 중 81개의 문항(48.50%)에서 정보 제시 오류가 있는 것으로 조사 되었다. 지필평가 문항의 정보 제시 오류로 인하여 학습자의 과학 학습에 대한 부정적인 관점이 발생할 수 있기 때문에 교사가 문항 개발할 때 세심한 검토가 필요하다.

Differential Effect of Item Characteristics on Science Achievement Between Genders

  • Shin, Dong-Hee;Moon, Nan-Moo
    • 한국과학교육학회지
    • /
    • 제24권1호
    • /
    • pp.17-28
    • /
    • 2004
  • The purpose of this study is to determine the patterns of differences between genders in science achievement. Eleventh grade, 140 female and male students were sampled from a school in Seoul. According to the analysis results of pilot study, 20 items were finally selected for the main study. To sharpen our interpretations of the factors and provide some confirmation, we supplemented the statistical analysis with a more detailed cognitive study of the items using think-aloud protocols and interviews with student test takers. The analysis of this study took into account the different item formats, contexts, and presentation styles. The findings are as follows: First, there was no significant gender difference between multiple-choice and open-ended items. Second, male students achieved significantly better in the context of everyday life in multiple-choice items. Third, male students favored items presented as written texts. Fourth, in problem-solving process, female students tend to apply their science concepts, whereas male students tend to apply their everyday experiences. The results of this investigation indicate that gender difference in science achievement depends heavily on item characteristics.

제품(製品) 수명(壽命) 시험(試驗)의 응용(應用)과 확장(擴張) (Expansions and Applications of Item Life-time Testing)

  • 이창호
    • 품질경영학회지
    • /
    • 제11권1호
    • /
    • pp.10-17
    • /
    • 1983
  • 본 연구에서는 제품의 수명시험을 수행하는데 있어서 수명이 지수분포를 따를 때의 결과를 [1]제품의 MTBF가 $T_1$인 경우, 검사에 통과될 확률 $1-{\alpha}$(${\alpha}$는 생산자 위험), 제품의 MTBF가 $T_2$인 ($T_1$ > $T_2$) 경우, 검사에 통과될 확률 ${\beta}$(${\beta}$는 소비자 위험)로 하여 수명이 Weibull 분포(Shape Parameter를 알고 있을 때)를 따를 때에로 확장하였다. 또한, 수명시험과 관계있는 검사특성곡선(QC curve)과 평균수명시험시간(Average Life Testing Time)을 구해 보았다. 비용분석은 [1]의 과정을 그대로 활용하였다. 위의 전 과정은 Level II Basic Language로 Programming하여 Micro-Computer를 이용하여 계산하였다. 본 연구와는 다른 관점에서 Weibull 분포의 수명시험계획을 다루었던 [6]의 결과는 모두 같은 방향 - 지수분포에 비해 수명시험시간의 절감 - 으로 귀결되었음을 알 수 있다.

  • PDF

2010-2012년 국가수준 학업성취도 평가에서 나타난 초등학교 성취수준별 학업 특성 (Elementary school learning characteristic of each proficiency level that appears in 2010-2012 Nation Assessment of Educational Achievement)

  • 조윤동;이광상
    • 한국수학교육학회지시리즈A:수학교육
    • /
    • 제53권2호
    • /
    • pp.219-237
    • /
    • 2014
  • In this study we desire to deduce implications for mathematics curriculum, teaching- learning, and evaluation from the data of Nation Assessment of Educational Achievement. For this, first we extracted the items written by the same achievement standard over two years from 2010 to 2012. Next we investigated whether the items are the representative items of a certain proficiency level and classified into the case of the items of the same proficiency level and the case of the items of different proficiency levels. Based on these we analysed learning characteristic of the each proficiency level. From the results of the above, we proposed what should be changed in mathematics curriculum, what should be considered in teaching-learning, and what should be paid attention to test item development.

중등 예비 화학교사의 지필평가 문항 제작 과정에서 고려된 교과교육학 지식(PCK) 구성 요소 사이의 상호작용 (Interactions among PCK Components of Pre-service Secondary Chemistry Teachers Considered in Processes of Making Written Test Items)

  • 노태희;박재성;강훈식
    • 한국과학교육학회지
    • /
    • 제36권5호
    • /
    • pp.769-781
    • /
    • 2016
  • 이 연구에서는 중등 예비 화학교사가 지필평가 문항을 개별 및 소집단별로 제작하는 과정에서 고려된 교과교육학 지식(PCK) 구성 요소 사이의 상호작용을 분석하였다. 예비교사 8명의 개별 지필평가 문항 제작 활동에 대한 발성사고 과정을 분석한 결과, PCK 구성 요소 중에서는 과학 평가에 관한 지식 측면이 가장 많이 고려되었으며, 과학 교육과정에 관한 지식과 과학 내용에 관한 지식, 학생에 관한 지식 측면도 비교적 많이 고려되었다. 그러나 과학 교수 전략에 관한 지식 측면은 거의 고려되지 않았다. PCK 구성 요소 중 2가지 측면 또는 3가지 측면의 통합이 다양한 유형으로 자주 나타났으나, 4가지 이상의 측면이 통합된 경우는 없었다. 한편 각 4명의 예비교사로 구성된 2개 소집단의 지필평가 문항 제작 과정을 분석한 결과, 고려된 PCK 구성 요소의 경우 개별 지필평가 문항 제작 과정과 비교하여 전반적인 양상은 유사하였다. 그러나 과학 교육과정에 관한 지식 측면은 약간 적게 고려되었고, 나머지 4가지 측면에서는 비교적 높은 빈도로 고려된 하위 항목의 개수가 증가하였다. PCK 구성 요소 사이의 통합 수준에서는 2가지 측면의 통합의 발생 비율은 감소하고 3가지 측면의 통합의 발생 비율이 증가하였으며, 특히 4가지 및 5가지 측면의 통합이 새롭게 나타났다. 그러나 과학 교육과정에 관한 지식을 포함한 통합은 감소하였고, 과학 교수 전략에 관한 지식 측면을 포함한 통합은 여전히 거의 나타나지 않았다.

중등 예비 화학교사의 해결자·청취자 활동을 통한 지필평가 문항 제작 과정에서 언어적 행동 및 상호작용 (Verbal Behaviors and Interactions in Processes of Making Written Test Items Using Paired Think Aloud Problem Solving for Pre-Service Secondary Chemistry Teachers)

  • 강훈식
    • 한국과학교육학회지
    • /
    • 제38권5호
    • /
    • pp.611-623
    • /
    • 2018
  • 이 연구에서는 중등 예비 화학교사가 해결자 청취자 활동을 통하여 지필평가 문항을 제작하는 과정에서 나타난 해결자와 청취자의 언어적 행동 및 상호작용을 분석하였다. 이를 위하여 2명의 예비교사로 구성된 4개 조의 해결자 청취자 활동을 통한 지필평가 문항 제작 활동을 녹화 후 전사하여 분석하였다. 연구 결과, 10가지 해결자의 언어적 행동 항목 중에서는 PCK 구성 요소 사이의 '통합' 여부와 관계없이 '제작'이 가장 많이 나타났다. 그 다음으로는 '제공', '수정', '동의요청', '질문', '동의', '정당화' 등도 비교적 많았는데, 특히 '질문'의 경우 '비통합'에서 더 많았던 반면, '정당화'의 경우에는 '통합'에서 더 많았다. 8가지 청취자의 언어적 행동 항목 중에서는 '통합' 여부와 관계없이 '지적', '질문', '동의'가 비교적 많았는데, 특히 '비통합'에서는 '질문'과 '동의'가 더 많았고 '통합'에서는 '지적'이 더 많았다. 언어적 상호작용 유형 중에서는 '대칭형'이 '청취자 주도형'이나 '해결자 주도형'보다 더 많았다. 또한 '대칭형'의 경우 '통합'에서 더 많았던 반면, '해결자 주도형'의 경우에는 '비통합'에서 더 많았다. '청취자 주도형'에서는 '통합' 여부에 관계없이 유사하게 나타났다. '대칭형'은 23가지 항목 중에서 '질문-제공'과 '지적-정당화'가 비교적 많았는데, 그 중에서도 '지적-정당화'는 '통합'에서 더 많았고, '질문-제공'은 '비통합'에서 더 많았다. '통합' 여부와 관계없이 '청취자 주도형'의 경우에는 4가지 항목 중에서 '지적-수정'이 가장 많았고, '해결자 주도형'에서는 3가지 항목 중에서 '제작-동의'가 가장 많았다. 3가지 상호작용 유형에 대하여 다른 항목의 경우에는 매우 적게 나타났다.

영어기반 컴퓨터자동채점모델과 기계번역을 활용한 서술형 한국어 응답 채점 -자연선택개념평가 사례- (Scoring Korean Written Responses Using English-Based Automated Computer Scoring Models and Machine Translation: A Case of Natural Selection Concept Test)

  • 하민수
    • 한국과학교육학회지
    • /
    • 제36권3호
    • /
    • pp.389-397
    • /
    • 2016
  • 이 연구는 기계 번역을 활용하여 영어기반서술형 평가의 자동채점모델을 한국어 응답에 적용하는 방법의 효용감을 조사하기 위하여 이루어졌다. 이 연구를 위하여 예비생물교사 128명이 4문항으로 구성된 자연선택개념평가도구에 응답한 512개의 서술형응답을 활용하였다. 서술형응답은 한글맞춤법을 교정한 것과 교정하지 않은 학생들이 작성한 그대로의 응답 두 가지를 구글번역으로 번역하였다. 8가지 과학적 개념과 비과학적 개념을 채점하는 자동채점모델을 통해 생성한 4096개의 예측자료의 정확도를 독립적으로 수행한 전문가 채점자료와 비교하는 방법으로 확인하였다. 그 결과 컴퓨터로 채점한 점수와 전문가 채점점수의 평균값의 문항별 분포는 유의미한 차이가 없었다. 평균값을 활용하여 생성한 통계치들은 전문가 채점자료를 통하여 생성한 자료들과 유의미한 차이가 없었다. 학생별 점수의 Pearson 상관관계 계수를 확인한 결과 과학적 개념 점수는 0.848, 비과학적 개념 점수는 0.776이었다. 언어적으로 단순한 개념의 경우 채점자간 일치도 (kappa)가 0.8이상이었다. 이 결과는 기계 번역과 영어기반 서술형 평가의 자동채점모델이 우리나라 학생들의 자연선택개념문항을 채점하는데 유용한 방법이 될 수 있음을 보여준다.

한국형 아유르베다(Āyurveda) 체질유형 검사지의 개발을 위한 기초연구 (A Development of the Korean Version of the constitutions in Ayurveda Questionnaire)

  • 정미숙;임애라
    • 한국산학기술학회논문지
    • /
    • 제17권12호
    • /
    • pp.62-70
    • /
    • 2016
  • 이 연구는 한국형 아유르베다 체질을 측정할 수 있는 도구를 개발하기 위한 기초 작업으로 검사지의 신뢰도와 타당성을 검증하는 것이다. 각 대상자는 63문항에 대하여 자기-기입식 설문지를 작성하였다. 아유르베다 체질을 7체질로 개념화하고 우선 271명을 대상으로 실시한 체질 검사의 신체 특성인 41문항에 대한 내적 일관성 신뢰도(Cronbach's ${\alpha}$)는 0.757로, 심리에 대한 질문 22문항에 대한 내적 일관성 신뢰도는 0.616으로, 그리고 전체 63문항의 내적 일관성 신뢰도는 0.840으로 유의미한 수준이었다. 신체에 대한 질문 4번과 심리 9번 문항의 경우 문항 총점과의 상관(item-total correlation)이 음의 값으로 응답의 일관성(신뢰도)이 떨어지는 것으로 나타났다. 그리고 순수 바따, 삣따, 까파 유형 대상으로 신체 4번, 심리 9번을 삭제 한 나머지 61문항의 신뢰도는 0.864로 나타났다. 위의 결과는 복합체질을 제외한 순수체질만을 대상으로 했기 때문에, 응답의 일관성을 나타내는 내적 일관성 신뢰도가 더 높게 나타났다. 그리고 타당도에서는 아유르베다 전문가의 판단과 검사지 응답의 문항점수 간의 일치도 카파(kappa) 계수는 0.619로 유의미한 수준이다. 따라서 본 연구는 한국형 아유르베다 체질 검사지의 개발을 위한 기초자료가 될 것이다.

한국어 표준발음법의 전산화 및 응용 (Computerization and Application of the Korean Standard Pronunciation Rules)

  • 이계영;임재걸
    • 한국언어정보학회지:언어와정보
    • /
    • 제7권2호
    • /
    • pp.81-101
    • /
    • 2003
  • This paper introduces a computerized version of the Korean Standard Pronunciation Rules that can be used in speech engineering systems such as Korean speech synthesis and recognition systems. For this purpose, we build Petri net models for each item of the Standard Pronunciation Rules, and then integrate them into the sound conversion table. The reversion of the Korean Standard Pronunciation Rules regulates the way of matching sounds into grammatically correct written characters. This paper presents not only the sound conversion table but also the character conversion table obtained by reversely converting the sound conversion table. Malting use of these tables, we have implemented a Korean character into a sound system and a Korean sound into the character conversion system, and tested them with various data sets reflecting all the items of the Standard Pronunciation Rules to verify the soundness and completeness of our tables. The test results show that the tables improve the process speed in addition to the soundness and completeness.

  • PDF