• Journal of Korean Society of Transportation
• /
• v.25 no.5
• /
• pp.43-55
• /
• 2007

Gyeonggi-do has conducted bus management and service evaluation of bus operating company since 2005 under the law for promoting public transportation. The evaluation results are used for improving bus service, making policy, and estimating incentives to bus companies. A lot of cost and man-month are needed to evaluate bus management and service for bus operating company, and many companies are against the evaluation. Therefore, the effect analysis on evaluation system should be followed to maintain it. This research results in the evaluation system has positive effects through quantitative and qualitative analysis. The data of bus company's operation condition in 2005 and 2006 are used for a comparative analysis. From the survey result for the company, bus drivers, and administrators, it results that positive effects are predominant. The results of this research could be used for a shield against some criticism about appropriateness of the evaluation criteria and effectiveness of the evaluation system. For improving bus service, evaluation items and criteria could be added or adjusted based on this research.

• The Journal of Korean Institute for Practical Engineering Education
• /
• v.4 no.1
• /
• pp.7-12
• /
• 2012

There are two ways in general for evaluating the accomplishments used by the universities, one is relative evaluation, the other is absolute evaluation. Recently, Korean universities have had the problem with score inflation due to absolute evaluation. The advantage of relative evaluation compared with absolute evaluation is for us to distinguish one's academic accomplishments from others. However, relative evaluation would lead to over-competition. Through this paper, I tired to analyze how cooperative learning influences the academic accomplishments under relative evaluation. Cooperative learning in the relative evaluation of student accomplishments conducted were divided into three groups. And analyzed a result and following presented about the research which in necessary.

• The Journal of The Korea Institute of Intelligent Transport Systems
• /
• v.10 no.1
• /
• pp.67-75
• /
• 2011

This paper presents a new test technique for evaluating performance of vehicle detectors with interval estimation, not the conventional point estimation, for presenting statistical confidence interval. The methodology is categorized into three parts; sampling plan, analysis on the characteristic of evaluation indices, and the expression of evaluation results. Even though many statistical sampling plans exist, stratified random sampling is regarded as the most appropriate one, considering the detector performance characteristics that varies with traffic, illumination, and meteorological conditions. No magic bullet exists for evaluation index for detector evaluation, hence the characteristics of evaluation indices were thoroughly analyzed and a reasonable process for choosing the best evaluation index is proposed. Finally, the methodology to express the result of detector evaluation for the entire evaluation period and individual analysis interval is represented, respectively. To overcome the existing drawbacks in point estimation, interval estimation by which statistical confidence interval can be represented is introduced for enhancing statistical reliability of traffic detector evaluation. This research can make vehicle detector scheme improve one step forward.

• Proceedings of the Korean Society of Organic Agriculture Conference
• /
• 2009.12a
• /
• pp.279-280
• /
• 2009

우리나라는 1990년대 후반부터 유기농업에 대한 관심이 높아지기 시작해 유기농산물 생산이 매년 증가추세를 보이고 있다. 유기농업의 관심증대는 유기농업에 사용되는 자재에도 영향을 미치게 되었으며, 친환경농업육성법 제7조에 따른 별표1에 유기농산물 생산을 위해 사용이 허용된 자재 119종을 명시하였다. 또한 이를 원료로 한 친환경유기농자재에 대해 농촌진흥청에서 고시한 '친환경유기농자재 목록공시기준 및 품질규격'에 따라 제품을 평가하여 친환경유기농자재목록에 등재하게 되어있다. 본 연구는 우리나라 친환경유기농자재 등록을 위한 안전성 평가 항목을 유럽에서 적용하고 있는 유기 농자재 목록공시를 위하여 요구되는 FiBL(스위스 국제유기농업연구소)의 평가 항목과 미국 OMRI(미국 유기농자재 평가원)의 평가 항목을 비교하여 도입이 가능한 항목을 검토, 제안하기 위해 수행하였다. 조사 결과는 친환경유기농자재 평가항목의 국 내외 기준 평가와 친환경유기농자재 평가의 국제 규격 부합도 평가, 두 가지로 구분되며, 친환경유기농자재 평가항목의 국 내외 기준 평가 결과 선진국의 평가 항목에 비해 평가항목들이 세분화되어 있지 않고 검토과정이 서면으로 이뤄지기 때문에 전문가들의 평가에도 한계가 있었다. 따라서 OMRI 및 FiBL의 평가항목 중 국내에 도입 가능한 항목을 수집하여 평가항목 개선방안(표 1)을 제시하였다. 국제 규격 부합도 평가 결과 친환경유기농자재 관련 법규 및 규정의 분산으로 인해 생산자 및 수요자가 자재 등록 및 사용에 어려움이 따르고 있고, 미국 OMRI의 경우 자재를 자체적으로 분석하여 검토하는 절차에 반해 우리나라의 경우 전문기관과 전문 인력의 부족으로 평가결과에 대해 수요자의 신뢰도가 낮아지고 있다. 환경위해성 및 독성에 대한 안전성 강화를 위해 전문기관과의 협의 및 심의 체계 확립이 필요하며 올바른 관리를 위한 자재 종류별 최소한의 담당 전문가 배치가 필요하다.

• Journal of Educational Research in Mathematics
• /
• v.22 no.2
• /
• pp.277-292
• /
• 2012

Teacher's competence in student assessment can be developed by the successive experiences that they choose assessment methods, develop assessment instrument, administer the assessment, score and grade students' responses, analyze, interpret, use, and communicate assessment results, and reflect the whole assessment processes. In this study I educated pre-service teachers in order for them to improve their assessment competence. Mathematics pre-service teachers practiced and reflected the assessment processes. In the aspects of reflections, I analyzed their journals about the knowledge of assessment, the dual situation as a student and a teacher, and their assessment practices. These areas are proved to interact each other, contribute pre-service teachers' assessment competence and construct the elements of assessment competence. And I identified the development of pre-service teachers' assessment competence quantitatively by the teacher's assessment competence test.

• Annual Conference on Human and Language Technology
• /
• 2023.10a
• /
• pp.228-233
• /
• 2023

인간의 수동 평가 시 시간과 비용의 소모, 주석자 간의 의견 불일치, 평가 결과의 품질 등 불가피한 한계가 발생한다. 본 논문에서는 맥락을 고려하고 긴 문장 입출력이 가능한 ChatGPT를 활용한 한국어 요약문 평가가 인간 평가를 대체하거나 보조하는 것이 가능한가에 대해 살펴보았다. 이를 위해 ChatGPT가 생성한 요약문에 정량적 평가와 정성적 평가를 진행하였으며 정량적 지표로 BERTScore, 정성적 지표로는 일관성, 관련성, 문법성, 유창성을 사용하였다. 평가 결과 ChatGPT4의 경우 인간 수동 평가를 보조할 수 있는 가능성이 있음을 확인하였다. ChatGPT가 영어 기반으로 학습된 모델임을 고려하여 오류 발견 성능을 검증하고자 한국어 오류 요약문으로 추가 평가를 진행하였다. 그 결과 ChatGPT3.5와 ChatGPT4의 오류 요약 평가 성능은 불안정하여 인간을 보조하기에는 아직 어려움이 있음을 확인하였다.

• Proceedings of the KOR-KST Conference
• /
• 1998.10a
• /
• pp.62-72
• /
• 1998

ITS의 도입효과평가에 관한 외국의 사례를 검토하고, 이를 토대로 우리나라 실정에 맞는 평가항목, 기준등 평가방안 및 운영프로그램을 마련하였다. 즉, 'ITS'를 기능 측면, 주요기반기술 측면에서 분류하였으며, 해외사례를 중심으로 평가항목 및 결과를 조사, 정리하였다. 또한 이 결과를 바탕으로 ITS 평가를 위한 내용적 분류 및 ITS 체계구성요소와 기반기술별 각종 'ITS' 체계구성요소와 기반기술별 각종 'ITS'의 효과를 평가할 수 있는 항목, 내용 및 평가 운용 프로그램을 개발하였다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2000.04a
• /
• pp.534-536
• /
• 2000

소프트웨어의 품질은 소프트웨어의 가치를 결정하는 중요한 요인이다. 최근, 소프트웨어의 품질에 대한 중요성이 증대되고 있으며 소프트웨어 제품의 품질인증에 대한 관심이 고조 되고 있다. 이러한 시점에서 소프트웨어 품질측정 및 평가 방법론에 국제 표준에 맞추어 체계화되고, 소프트웨어 제품 평가를 효율적으로 지원할 수 있도록 도구화할 필요가 대두되고 있다. 현재 소프트웨어 제품 평가에 관련된 국제 표준으로서 프로세서에는 ISO/IEC 14598이 있으며 제품 평가를 위한 품질특성에 관한 ISO/IEC 9126-2의 외부메트릭 체계와 9126-3의 내부메트릭 체계를 평가 메트릭 구축에 적용하고 평가 절차에 따라 메트릭 측정 결과를 입력하여 결과를 가시화하여 제공할 수 있는 도구를 설계하였다.

• Journal of The Korean Association For Science Education
• /
• v.44 no.1
• /
• pp.119-130
• /
• 2024

This study explores the possibility of using a generative artificial intelligence, ChatGPT, for student assessment in science subjects. In order to achieve our goal, we developed assessment items, collected students' responses, and input them into ChatGPT to implement the assessment procedures. Subsequently, we shared the assessment results from ChatGPT with science teachers and compared them to the teachers' assessment process to investigate the use of ChatGPT in student assessment. Regarding the results, in terms of setting the scoring rubric, we found the rubric generated by ChatGPT to be generally appropriate. However, the consistency between the scoring results obtained from ChatGPT and those determined by the teachers was relatively low. This inconsistency was more pronounced in items with additional assessment components and a more intricate rubric. In regard to feedback on student responses, there were some instances where the feedback generated was scientifically incorrect or beyond the scope of the curriculum, but there were also some positives, such as the provision of exemplary answers to questions and additional examples that helped students learn further. From these results, the teachers perceived limitations in using ChatGPT to conduct assessment in terms of reliability, which is considered crucial in student assessment, but suggested that it could be used to support assessment. Finally, synthesizing these findings, implications for utilizing ChatGPT in student assessment were suggested.

• Proceedings of the Korean Society for Information Management Conference
• /
• 2000.08a
• /
• pp.45-50
• /
• 2000

자동분류나 정보검색에 활용되는 문헌 클러스터링 결과의 성능을 평가하는 방법에는 여러가지가 있다. 본 논문에서는 제시된 몇 가지 평가방법의 개념과 특징에 대해 알아본다 학술논문 초록 집합인 KTSET과 신문기사 집합인 KFCM-CL을 대상으로 각각 유사계수를 변화시켜가며 클러스터링한 결과에 대해 각 평가방법을 적응해본 후, 특징과 문제점을 살려 보았다.