Design and Implementation of a Subjective-type Evaluation System Using Natural Language Processing Technique

유의어 사전을 이용한 주관식 문제 채점 시스템 설계 및 구현

An instructor in education generally takes the objective-type evaluation for grading. The subjective-type evaluation has the merit that it can estimate the high-recognition ability, but the problem of the objectivity and reliability of the evaluation. This paper proposes the model which grades for the subjective-type evaluation. and designs and implements the evaluation system using the synonym thesaurus. This system can process the diverse and wide subjective-type questions and provide the easy usage for a beginner. It also can reduce the time and endeavor for evaluation and provide the objectivity of the evaluation. The system results the 73% success rate. We expect that this system will become a basis of the research on the subjective-type evaluation.

일선학교에서 평가는 주로 객관식 평가를 하여왔다. 주관식 평가는 객관식보다 높은 수준의 인지 능력을 측정할 수 있으나 채점의 객관성과 신뢰성의 문제로 기피하여 왔다. 본 논문은 주관식 평가를 위해 주관식 문제 채점 모형을 제안하고 유의어 사전을 이용한 채점 시스템을 설계, 구현하였다. 제안된 시스템은 주관식 문제의 다양한 유형을 처리할 수 있도록 하고 시스템의 사용법을 알지 못하는 교사라도 쉽게 이를 이용할 수 있는 편리성을 제공하였다. 이 시스템을 통해 채점의 시간과 노력을 덜고 채점의 객관성을 획득할 수 있다. 시스템의 실험 결과 시스템 채점이 교사 채점의 최고와 최저 사이에 오는 경우가 73%에 달하는 결과를 얻을 수 있었다. 앞으로 본 연구가 주관식 문제 채점 방법 연구의 기반이 될 것으로 기대된다.