An AHP-based Assessment Criteria Decision System for National Research and Development Tasks

Professionalism, objectivity, and fairness are highly required in the assessment of tasks in national research and development projects. Experts in the technologies should thus focus on the task's plan in the review process. The same scores in the assessment, however, do not mean that the judges don't have the same opinions. Another problem is the possibility that different weights can be applied for evaluation indexes. This study proposed an AHP-based assessment criteria decision system for national research and development tasks to reduce errors in task assessment and selection and improve the professionalism and fairness by objectifying the evaluation criteria of each index. As a result, the assessment criteria were objectified for each index in the projects. In addition, the professionalism and fairness of experts were secured in the process of setting assessment criteria for each index based on the given marks of weights.

AHP 기반 국가 연구개발 과제 평가 기준 결정 시스템

국가 연구개발 사업의 과제 평가는 신청된 과제 중에서 기술성 또는 사업화 가능성이 높은 과제를 선별하기 때문에 고도의 전문성 및 객관성, 공정성이 요구된다. 이를 위해 신청된 각 세부과제의 기술 분야 전문가가 해당 과제의 계획서를 중점적으로 검토하게 된다. 그러나 평가 과정에서 평가 위원의 평가 지표 점수가 같다고 하더라도 평가 위원의 평가 의견이 동일하다고 판단할 수 없으며, 실제 적용되는 평가 지표의 가중치가 다르게 적용될 수 있다는 문제점이 있다. 본 연구에서는 국가 연구개발 사업의 선별 평가를 위한 각 지표별 평가 기준을 객관화하여 과제 평가 선정의 오차를 줄이고, 평가의 전문성 및 공정성을 향상시킬 수 있는 AHP 기반 국가 연구개발 과제 평가 기준 결정 시스템을 제안하였다. 본 연구를 통해 국가 연구개발 사업의 지표별 평가 기준을 객관화할 수 있었으며, 부여된 가중치 배점을 이용하여 각 지표별 평가 기준을 산정하는 과정에서 각 분야의 전문가의 전문성 및 공정성을 확보할 수 있었다.