• 한국문헌정보학회지
• /
• 제56권4호
• /
• pp.309-333
• /
• 2022

본 연구에서는 전국의 국공립 및 사립, 전문대학의 교수들 2,618명을 대상으로 교수연구업적평가와 관련하여 교수들의 인식을 파악하고자 설문조사를 수행하였다. 설문조사는 두 가지 부분에 대한 인식을 파악하기 위한 조사로 하나는 현재 각 대학에서 진행되고 있는 교수연구업적평가에 대한 인식조사이며, 다른 하나는 정량 위주의 업적평가 방식의 대안으로 여겨지는 정성적 평가 지표의 도입에 대한 인식조사이다. 설문 결과, 교수 연구업적평가에서 정량 중심 평가는 여전히 대다수의 대학에서 크게 활용되며, 계열 또는 분야에 적합하지 않은 연구업적평가가 이루어지고 있으며, 평가 기간의 확대가 필요를 요구하고, 정량 위주의 업적평가 방식은 학술 커뮤니티에 부정적인 영향을 가져오며, 연구업적평가에 대한 개선의 필요하다는 인식을 가지고 있는 것을 확인할 수 있었다. 정성적 평가 지표의 도입과 관련하여 교수들은 연구업적평가에 정성적 평가가 필요하다는 인식을 하고 있으며, 정성적 평가 도입과 관련하여 부정적인 의견 또한 존재하는 것을 확인할 수 있었다.

• 한국도서관정보학회지
• /
• 제53권4호
• /
• pp.211-232
• /
• 2022

연구업적평가는 계량서지학을 중심으로 활용하여 정량적인 기준을 중심으로 이루어져 왔다. 하지만 정량평가만을 활용한 평가에 여러 한계점이 드러나고 연구품질의 우수성 평가에 대한 요구가 커지며 정성적인 평가 요소의 중요성이 커지고 있다. 이에 본 연구는 2010년 이후 전 세계에서 나타난 연구 평가 개선을 위한 사례를 조사하여 소개하고, 연구업적평가에 도입 가능한 정성적인 요소를 추출하기 위해 외국대학의 업적평가 사례를 조사·정리하여 국내 도입을 제안하였다. 전 세계 상위 10개 대학의 업적평가 서류, 평가 절차, 심사기준 등을 분석하여 정성적 평가 요소를 추출하였다. 결과로 본 연구는 업적평가 문서의 다각화, 다면 평가와 다단계 업적평가 과정, 다양한 질적 업적평가 기준에 대해 국내 도입을 제안한다. 전통적인 계량서지학에서 연구 평가 지표 생성 시 인용도를 측정하였다면, 미래 지표에서는 추천 점수를 지표로 반영하거나, 산업 연계성, 교육/산업에서의 활용도 등을 포함할 수 있다. 궁극적으로 본 논문을 통해 업적평가 방식이 균형을 이루고, 교수의 연구업적평가가 개인이 우수한 연구자로 성장하여 연구 환경 발전에 도움이 될 수 있는 과정으로 기능하게 되기를 희망한다.

• 기술혁신학회지
• /
• 제20권2호
• /
• pp.271-291
• /
• 2017

본 연구에서는 정부출연연구기관 중 하나인 K 연구원 사례를 활용하여 연구개발 프로젝트에 대한 정성평가 결과와 정량평가 결과를 비교 분석함으로써 연구개발 프로젝트 성과평가 체계 개선을 위한 시사점을 도출하였다. 비교 분석을 위해 정성평가 결과는 국가과학기술연구회 규정에 따라 진행된 실제 평가결과를, 정량평가 결과는 연구개발 프로젝트의 산출물 데이터를 기반으로 자료포락분석(data envelopment analysis) 결과를 활용하였다. 비모수 상관관계 분석(Kendall's ${\tau}$)을 비롯한 다양한 분석 결과, 정성평가와 정량평가 결과 사이에는 분명한 차이점이 있는 것으로 확인되었다. 따라서 단순 정성 또는 정량평가로 연구개발 프로젝트를 평가하기보다 정성 및 정량평가가 상호보완적으로 진행된다면, 평가 시 각 연구개발 프로젝트의 특성을 반영함과 동시에 객관성도 보다 확보할 수 있을 것으로 기대된다.

• 수산경영론집
• /
• 제42권3호
• /
• pp.15-29
• /
• 2011

The Fish Stock Rebuilding Plan (FSRP) is evaluated as one of the most effective fisheries policies domestically and internationally. FSRP is a comprehensive fisheries policy, including target stock size, rebuilding period, application of management measures, and participation of fishermen. The performance outcomes of FSRPs have been partially evaluated for recommendation for stock rebuilding in Korea, while they are fully evaluated in other countries that have implemented FSRPs. The performance evaluation system for FSRP is very needed to enhance its effectiveness as one of fisheries policies. That is, the system where problems can be reconsidered, achieving targets can be evaluated, and the plan can be modified should be implemented. This study classified the performance evaluation of FSRP into the economic evaluation as a quantitative analysis and the policy evaluation as a qualitative analysis. In the economic evaluation, the sustainability of fishery resources, the stability of fishing business, the efficiency of fishery production, and efficient utilization of fishery resources can be considered. As analytical methods for the economic evaluation, the bioeconomic model, efficiency estimation model, the dynamic MEY model can be utilized. The qualitative evaluation is to assess the qualitative performances of FSRPs, including interviews and surveys with fishermen and fisheries experts. In the survey, many different items can be included by evaluation factors which are related to policies such as timeliness, transparency, effectiveness, etc. In addition, the study suggested the performance evaluation system and procedures for objective and efficient evaluation of FSRPs. In order to practically apply the developed performance evaluation model, the pilot project is needed. That is, from the application of pilot project, detailed research methods, effective procedures, and evaluation factors can be investigated.

• 한국수소및신에너지학회논문집
• /
• 제33권3호
• /
• pp.232-239
• /
• 2022

This study performed qualitative and quantitative risk assessment of equipment for evaluating the protocol of hydrogen refueling stations and suggested measures to improve safety. Hazard and operability study was performed for qualitative risk assessment, and Hy-KoRAM was used for quantitative risk assessment. Through a qualitative risk assessment, additional ventilation devices were installed, simultaneous venting of the storage container was prohibited, and the number of repeated refilling of the evaluation equipment was identified to manage the number of fillings of the container. Through quantitative risk assessment, the area around the device was set as a restricted area when evaluating the station, and measures were suggested to reduce the frequency of accidents.

• 한국융합학회논문지
• /
• 제11권4호
• /
• pp.1-9
• /
• 2020

본 연구에서는 국내·해외의 성과평가 사례들에 대하여 조사 분석하여 시사점을 도출하고, 특허 창출 성과자료 또는 기업현황 자료의 분석을 통해 국가 R&D 성과평가 체계에 맞는 질적, 양적 특허성과 평가 지표와 평가 모형을 개발하고자 한다. 또한 이를 해외 수출 및 기술력이 우수한 특정 기업군에 적용하기 위하여 실태 조사 결과를 바탕으로 특허전략 지원사업 성과 분석 사례 연구를 하고자 한다. 본 연구를 통해 특허전략 지원사업이라는 한정된 사업 범위 또는 사업 특성에서 기인하는 성과평가 지표 개발의 한계점은 있으나 이전 연구 및 국내·해외 사례 분석을 통해 질적 평가체계를 검토하고 활용 가능한 특허성과의 평가 지표를 제시하고자 하였다. 지원사업 성과와 관련된 데이터 접근 및 수집의 문제로 인해 성과분석이 충분한 수준으로 이루어지지 못한 한계점을 가지고 있으나 그럼에도 불구하고 향후 R&D 지원사업, 특허전략 지원사업 등의 종료 후에도 추적조사를 통해 후속 성과분석 등이 이루어 질 수 있으므로 사업종료 시의 성과추적조사에 활용할 수 있는 성과지표 및 성과분석의 가이드 역할을 할 수 있을 것으로 기대된다.

• 융합정보논문지
• /
• 제10권3호
• /
• pp.48-57
• /
• 2020

본 연구는 정부에서 수여하는 국가 상(償)에 도전하는 혁신선도기업을 평가 및 선정하기 위한 정성지표개발에 초점을 맞추고 있다. 혁신선도기업을 지나치게 계량적으로 평가함에 따라 제품이나 기술, 서비스 등의 혁신성이나 가치 등이 평가가 절하되는 측면을 보완하는 것이 본 연구의 목적이기도 하다. 기존의 국가상 평가지표는 장점도 있지만 평가 항목이 너무 많아 혁신선도기업의 평가에는 적합하지 않은 측면이 있었다. 연구의 접근방법은 선행연구와 TF토의를 바탕으로 정성지표개발을 위한 항목을 선정하는 것으로 하였다. 기본적으로 투입-과정-산출-효과로 이어지는 일련의 흐름으로 지표항목의 체계를 갖추도록 하였다. 최종적으로 창의성, 시스템우수성, 고객가치, 기업성과, 파급효과 등의 5개 정성 지표항목이 선정되었다. 선정된 5개 지표항목에 대해서는 개념적 정의와 평가시 주안점 등을 서술하였다. 그리고 시스템 수준평가와 ADLI 접근방식도 제시하였다. 부록에는 본 연구에서 제시한 정성지표를 활용하여 실제기업을 정성적, 정량적 양식에 따라 평가한 사례도 수록하였다. 그러나 본 연구는 혁신선도기업을 정성적인 접근방식으로 평가하는 것으로 설계되어 있어, 평가자의 수준과 관점에 따라 평가결과가 변동되는 가능성을 갖는 한계점이 내포하고 있다. 향후에는 정성지표로 활용될 수 있는 후보지표들에 대한 세부연구와 혼합지표(정량, 정성)의 개발에 대한 연구가 지속되기를 기대한다.

• 한국철도학회논문집
• /
• 제10권4호
• /
• pp.420-430
• /
• 2007

It is reported that many users of the subways in Seoul are not currently satisfied with the subway services. The cause of the dissatisfaction is that the qualitative items and indexes are not considered properly, and also does not diversify the evaluation items to follow the change of subway environment. Therefore in this study the evaluation items and indexes that can reflect of the subway users' characteristics are examined and synthesized. Then the characteristics of service are analyzed for the senior subway system users and junior subway system users that are classified with the cluster analysis. The result of the study is that the majority of users on subway are not satisfied the qualitative items which are safety, kindness, comfortableness, convenience excepting for punctuality and accessibility. So, if the service of subway users improve, the qualitative items is needed to consider with quantitative items.

• 기술혁신연구
• /
• 제30권3호
• /
• pp.35-64
• /
• 2022

최근 국가연구개발의 집행예산은 증가 추세에 있고, 이에 따라 국가연구개발사업의 양적 성과 또한 증가하고 있으나, 질적 성과의 증가세는 양적 성과 대비 취약한 것으로 나타나고 있다. 특허등급 및 기술이전효율성이 낮은 기술 등 질적 성과 부진의 원인으로 '건 수' 위주의 성과평가에 대한 개선 필요성이 제기되고 있으며, 이에 대한 대응으로 다양한 '질적 성과지표'를 이용한 성과평가가 도입되고 있다. 본 연구에서는 여러 질적 성과지표 중 주요국(미국, 유럽, 일본) 특허청에 모두 출원하여 특허의 해외경쟁력을 측정할 수 있는 '삼극특허' 창출 과제를 대상으로 연구개발사업의 질적성과 평가를 위한 성과지표로서 삼극특허에 영향을 미치는 요인을 분석하였다. 분석결과, R&D규모 요인 및 과제특성 요인 중 일부는 삼극특허 창출에 통계적으로 유의한 영향을 미치는 것으로 나타났다. 본 연구는 성과분석 측면에서 선행연구가 상대적으로 미진한 삼극특허를 관심대상으로 확장하고, 삼극특허 창출의 영향요인을 선형회귀분석(OLS)을 통해 살펴본 초기연구라는 점에서 의의가 있다.

• 한국해양공학회:학술대회논문집
• /
• 한국해양공학회 2006년 창립20주년기념 정기학술대회 및 국제워크샵
• /
• pp.277-280
• /
• 2006

Most real world design evaluation and risk-based decision support combine quantitative and qualitative (linguistic) variables. Decision-making based on conventional mathematics that combines qualitative and quantitative concepts always exhibit difficulty in modelling actual problems. The successful selection process for choosing a design/procurement proposal is based on a high degree of technical integrity, safety levels and low costs in construction, corrective measures, maintenance, operation, inspection and preventive measures. However, the objectives of maximising the degree of technical performance, maximising the safety levels and minimising the costs incurred are usually in conflict, and the evaluation of the technical performance, safety and costs is always associated with uncertainties, especially for a novel system at the initial concept design stage. In this paper, a design-decision support framework using a composite structure methodology grounded in approximate reasoning approach and evidential reasoning method is suggested for design evaluation of machinery space of a ship engine room at the initial stages. It is a Multiple Attribute Decision-Making (MADM) or Multiple Criteria Decision Making (MCDM) framework, which provides a juxtaposition of cost, safety and technical performance of a system during evaluation to assist decision makers in selecting the winning design/procurement proposal that best satisfies the requirement in hand. An illustrative example is used to demonstrate the application of the proposed framework.