• 한국과학교육학회지
• /
• 제30권2호
• /
• pp.275-290
• /
• 2010

중학생의 과학탐구활동 수행평가 시 총체적 채점과 분석적 채점의 신뢰도를 비교 분석하였으며, 분석적 채점을 하는 경우에는 신뢰도 확보를 위하여 채점척도의 수준을 어느 정도로 분석적으로 해야 하는지를 조사하였다. 중학생들이 작성한 4개의 과학탐구과제에 대한 활동지를 두 명의 채점자가 총체적 채점 방식, 분석적 채점 방식, 분석적 채점 중 채점척도를 2, 3, 4~7수준으로 다르게 하여 채점하였다. 총체적 채점 방식은 과제 간 내적 일치도가 높게 나타났으며, 분석적 채점 방식은 채점자간 신뢰도가 높게 나타났다. 또한 채점척도 3수준의 경우는 4~7수준의 경우와 활동간 내적 일치도와 채점자간의 신뢰도가 유사하게 나타났으나, 능력추정치별 학생의 분포, 문항곤란도 및 문항특성곡선의 경우 채점척도 3수준의 경우가 적절한 것으로 나타났다. 이러한 연구 결과는 과학탐구활동 수행평가 시 총체적 채점 방식을 선택하는 경우는 과제 간 내적일치도를 높일 수 있으며 분석적 채점 방식에 비해 낮게 나타나는 채점자 간 일치도를 높이기 위한 채점자간 협의등 방안이 필요하다는 것을 시사한다. 또한 분석적 채점 방식을 선택하는 경우는 채점척도 3수준으로 충분히 신뢰도를 확보할 수 있다는 점을 시사한다.

• 한국과학교육학회지
• /
• 제19권4호
• /
• pp.507-515
• /
• 1999

본 연구에서는 과학 교사를 양성하는 사범대학 과학교육과 학생들의 일반화학실험 수행평가를 위한 분석적인 채점 준거를 개발하였다. 개발된 채점준거는 크게 두 가지로 나눌 수 있다. 첫 번째는 학생들이 실험을 수행하면서 나타나는 탐구 능력을 평가하기 위한 실험 보고서를 평가하는 분석적 채점 준거이다. 이 분석적 채점 준거는 일곱 가지 탐구 기능 요소로 나누어져 있으며, 한 학기용 실험 주제 9개에 대해서 모두 개발하였다. 두 번째는 학생들이 실험하는 동안에 교수와 조교가 직접적인 관찰에 의해 점검하는 형태로 평가하는 수공적 기능 채점 준거와 실험에 임하는 학생들의 태도를 평가하기 위한 분석적 채점 준거이다. 또한 학생들의 탐구 능력을 평가하는 실험 보고서에 대한 분석적 채점 준거의 기초가 되는 일곱가지 탐구 기능 요소에 대한 일반적 채점 준거도 개발하였다. 모든 채점 준거에 대한 타당도는 과학교육 전문가 6인에 의하여 검증 받았으며, 채점 준거로 실험 보고서를 평가한 결과로부터 채점자간 신뢰도를 검증하였다. 본 연구에서 개발한 평가 도구를 사용하여 얻어진 학생들의 일반화학실험 수업 성취도와 일반화학 이론 수업 성취도는 상관이 있는 것(r=.663.p<.01)으로 나타났으며. 44%($r^2$=.440)의 공통 분산 영역을 보여주었다. 따라서 본 연구에서 개발한 실험 평가 도구는 이론 수업 평가 도구에서 측정하지 못하는 다른 영역(56%)도 평가하고 있음을 알 수 있었다. 이러한 결과로부터 간접적으로나마 본 연구에서 개발한 실험 평가 도구가 전통적인 지식 이해만이 아닌, 실험을 수행하면서 나타난 탐구 기능, 수공적 기능, 실험 태도를 평가하는 도구라고 할 수 있다.

• 농촌계획
• /
• 제16권3호
• /
• pp.67-76
• /
• 2010

The objective of this study is to investigate a priority and selection of agricultural specialization items from Daegu and Gyeongbuk region by using analytical tools such as, the Analytic Hierarchy Process(AHP) and the Scoring Method. The results of this study are as follows; 1) Five major items were selected for each region based on Daegu and Gyeongbuk regional agricultural performances. 2) The results of AHP analysis, Daegu and Gyeongbuk's agricultural experts evaluated the weight of three decision-elements(objectiveness 0.35, efficiency 0.341, identity 0.309) and seven decision-elements. 3) Results of AHP and Scoring Method analysis, Investigated a priority of agricultural specialization 3 items in 25 cities and districts Daegu and Gyeongbuk regional agricultural performances. 4) Finally, The results of this study will provide basic information on agricultural specialization policy in Daegu and Gyeongbuk region.

• 농촌계획
• /
• 제12권4호
• /
• pp.1-11
• /
• 2006

Recently many administrative institutes try to improve the viability of rural villages. For increasing the viability, not only infrastructures but internal vitality is necessary in rural villages. Nonetheless, most of governmental projects have been focused on infrastructures. For this reason, RDA(Rural Development Administration) designed and performed the RHL(Rural Healthy and Longevity village) project. This RHL project is not easy to evaluate the outcome because it consists of very intangible project items. In this paper, we developed a scoring model to evaluate the result of the RHL project. The scoring model based on DEA(Data Envelopment Analysis) was suggested to evaluate the quantity of personal activities in each village. Personal activities are classified into five categories: regional life, social life, productive life, outdoor life and indoor life. Evaluating indices of each category are developed and weighting values are evaluated by AHP(Analytic Hierarchy Process). The developed model was applied to Kumsan village and examined its applicability.

• 대한수학교육학회지:수학교육학연구
• /
• 제8권1호
• /
• pp.217-235
• /
• 1998

The purpose of this study is to define the altenative assessment and to suggest the method of scoring system. Alternative assessment includes any type of assessment in which student create reponses to a question rather than choosing a responses form given list( as for multiple choice, true/false, or matching). Alternative assessment can includes short answer questions, essay, performances, oral presentation, demonstrations, exhibitions, portfolios, and etc. To evaluate the each type of assessment, we can apply the method of holistic scoring and analytic scoring system. Also we have to concern the type of scoring mechanism directly relate to what we want to assess, our purpose for assessment fitting into the educational enterprise. Before applying the alternative assessment in our classroom, we need to step back and reconsider all our design features and teachers' responsibility.

• 대한의용생체공학회:학술대회논문집
• /
• 대한의용생체공학회 1997년도 춘계학술대회
• /
• pp.199-202
• /
• 1997

We are developing computer integrated polysomnography system. This system integrates conventional polysomnography with computer for data management, automatic analysis, scoring, and data transmission. In the first stage, we have developed the signal interface and user interface for the manual scoring and data management. For the automatic scoring of sleep stage, we have developed the protocol and have applied the analytic method in its primitive form. In the second stage we will develope a partially automatic scoring system, and finalize the fully automatic system in the final third stage.

• 영어어문교육
• /
• 제12권1호
• /
• pp.221-238
• /
• 2006

This study investigates the reliability of plagiarism measurement in the ESL essay writing context. The current study aims to address the answers to the following research questions: 1) How does plagiarism measurement affect test reliability in a psychometric view? and 2) how do raters conceive the plagiarism in their analytic scoring? This study uses the mixed-methodology that crosses quantitative-qualitative techniques. Thirty eight international students took an ESL placement writing test offered by the University of Illinois. Two native expert raters rated students' essays in terms of 5 analytic features (organization, content, language use, source use, plagiarism) and made a holistic score using a scoring benchmark. For research question 1, the current study, using G-theory and Multi-facet Rasch model, found that plagiarism measurement threatened test reliability. For research question 2, two native raters and one non-native rater in their email correspondences responded that plagiarism was not a valid analytic area to be measured in a large-scale writing test. They viewed the plagiarism as a difficult measurement are. In conclusion, this study proposes that a systematic training program for avoiding plagiarism should be given to students. In addition, this study suggested that plagiarism is measured reliably in the small-scale classroom test.

• 대한예방한의학회지
• /
• 제13권1호
• /
• pp.105-115
• /
• 2009

Background: The resource-based relative value scale has been applied to Korean medicine services as part of the National Health Insurance, yet the proper scoring method for physician's work needs to be developed. Objectives: To measure physician's work for Korean medicine services using Analytical Hierarchy Process(AHP) and to compare results abstracted by AHP with those by Magnitude Estimation method. Methods: We developed the AHP questionnaires for Korean Medicine services and administered it to 12 Korean medicine insurance experts. Weighted scores were calculated and were converted into physician's work scores. Results: In AHP measurement, the physician's work scores for acupuncture activities, especially special acupunctures, far increased, while those for diagnosis and basic consultations decreased. Variations in the scores enlarged. Conclusions: As an alternative, AHP method can be considered for measuring the physician's work for Korean medicine services with careful management of scoring variation.

• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제26권3호
• /
• pp.251-271
• /
• 2012

이 연구는 관찰 추천 수학영재선발 시 사용되는 자기소개서와 교사추천서 평가에서 발생하는 오차요인들의 상대적인 영향력을 살펴보고, 교사추천서와 자기소개서를 총체적 채점과 분석적 채점으로 실시했을 때 채점 방법에 따른 일반화가능도계수의 최적화 측정 조건을 탐색하고, 이를 전통적인 신뢰도 추정방법과 비교하였다. 2011학년도 수도권에 소재하고 있는 대학부설 과학영재교육원에서 관찰-추천 영재 선발에 지원한 90명의 자기소개서와 교사추천서에 대해 총체적 채점과 분석적 채점으로 2명의 교사가 각각 점수를 부여하였다. 연구결과는 다음과 같다. 첫째, 교사추천서와 자기소개서의 평가에 있어 채점방법에 따른 공통점은 피험자 관련 분산이 크게 나타났으며, 차이점은 총체적 채점이 분석적 채점보다 채점자의 영향이 더 큰 것으로 나타났다. 둘째, 적정수준의 일반화가능도계수를 얻기 위해서 채점자를 2명으로 고정하는 경우 교사추천서와 자기소개서에서 총체적 채점은 각각 내용영역이 5개, 10개 이상이 요구되어졌으며, 분석적 채점은 각각 내용영역을 4개로 고정한 경우 문항이 3개 이상, 내용영역을 6개로 고정한 경우 문항이 8개 이상이 요구되어졌다. 셋째, 교사추천서와 자기소개서 모두 채점 방법과 상관없이 문항만을 오차요인으로 보는 Cronbach ${\alpha}$가 신뢰도를 과대 추정하는 것으로 나타났다. 따라서 적정수준의 신뢰도를 확보하기 위해서는 채점자, 내용영역, 문항수와 같이 다양한 오차요인을 반영하는 일반화가능도 계수를 고려하는 것이 바람직할 것이다.

• 대한안전경영과학회지
• /
• 제10권3호
• /
• pp.193-201
• /
• 2008

As The development and commercialization of advanced technologies will depend increasingly on efficient technology transfer and technology trading systems and the knowledge economics grows rapidly, the value of intangible assets is more emphasized in business nowadays. Intangible assets include intellectual capital and intellectual property. This requires the development of technology markets or exchanges and hence a reliable technology valuation methodology. Our focus is on the business aspects of technology' contribution and we propose an objective scoring system, which is implemented by ANP, for Technology valuation of enterprise. As a result, This study intends to evaluate the contribution of an individual technology in intangible assets by the Analytic Network Process(ANP).