• 한국신재생에너지학회:학술대회논문집
• /
• 2009.11a
• /
• pp.302-302
• /
• 2009

미국 DOE(Department of energy) 산하 EERE(the office of energy efficiency and renewable energy)에서는 시행되고 있는 일반 프로그램 평가(General Program Evaluation) 중 하나인 과정 평가(Process Evaluation)는 프로그램의 수행의 효율성과 유효성을 평가하기 위해 수행된다. EERE에서는 프로그램 별로 매 2~3년에 한번, 프로그램의 진행에 장애요인을 시행하기 위해 부정기적으로 과정평가를 수행하여 프로그램의 진행과정을 개선할 것을 제안하고 있다. 과정평가의 방법론으로는 사례연구(case study), 내용분석(content analysis), 메타평가(meta evaluation), 델파이분석(delphi-analysis), 외부 동료평가(peer review) 등의 방법론이 사용될 수 있다. 특히, EERE는 "Peer Review Guide(2004)"을 발간하여 과정평가에서 있어 외부 동료평가의 방법론을 정리하였다. 과정평가를 통해 프로그램 수행결과의 중간점검과 동시에 프로그램의 발전을 위하 전문가의 제언을 수집할 수 있다. 따라서 과정평가의 결과는 프로그램의 개선에 도움을 줄 수 있으며, 장기 과제인 경우 프로그램 관리에 효과적으로 사용될 수 있다. 우리나라의 경우, 사업 수행 시 '진도보고'나 '중간결과 발표' 등을 통하여 동일한 내용의 평가를 시행하고 있으나, 평가의 항목.시기.예산 등에 대한 지침(guideline)이 구축되었다고 볼 수 없는 상황이다. 한국의 신재생에너지 보급사업은 국가적인 중요도, 투입예산의 규모 및 수행기간 등을 고려할 때 과정평가를 통해 정기적으로 사업의 진행과정을 점검할 필요가 있다 하겠다. 따라서 신재생에너지 분야의 사업의 관리에 적용될 수 있는 EERE의 과정평가를 한국의 상황에 맞게 수정하고 이를 정규적으로 시행하는 방안에 대한 논의가 필요하다 하겠다.

• Information Systems Review
• /
• v.14 no.2
• /
• pp.117-140
• /
• 2012

It is hard, but important to evaluate and select a new service model for the public sector, accompanying unexpectable risk. The purpose of this study is to build and develop the evaluation framework of public projects and to present a project evaluation system which is more rational and methodical. The evaluation framework has been developed by calculating the evaluation criteria and weights resulted from an interview with an expert group and Analytic Hierarchy Process(AHP). Moreover, market-oriented characteristics, technology-oriented characteristics, service development capabilities and policy-oriented characteristics were predominantly chosen as the evaluation items. The re-evaluation of the app development support programs was conducted to check the feasibility as an evaluation system influencing the performance of firms. The result of an evaluation system proposed by this study showed better evaluation performance than previous ones, better predicting the actual business performance. Currently, though the policies of the public sectors and support programs focus on the outcome and performance management, the result of this study shows the importance of project selections. Also, implications of the study are discussed.

• Proceedings of the Korean Operations and Management Science Society Conference
• /
• 2004.05a
• /
• pp.560-563
• /
• 2004

기술개발이 국가경쟁력 제고의 중요한 수단으로 인식됨에 따라 국가차원에서의 연구개발이 적극적으로 추진하고 있다. 우리나라의 경우도 예외가 아니어서, 1990년대 이후 우리 정부는 국가연구개발사업을 높이기 위해 연구 평가제도를 꾸준히 정비하여 왔다. 그러나 아직까지도 연구평가와 관련하여 여러 가지의 개선요구가 연구자들로부터 제기되고 있다. 이러한 현상이 나타나는 이유는 근본적으로 연구평가가 공급자 위주로 이루어지면서 미래지향적이고 효율적인 접근이 이루어지지 못하였다는 데에서 그 원인을 찾을 수 있다. 본 연구에서는 현재 여러 정부부처에서 연구평가를 시행하면서 연구과제의 선정단계와 중간평가단계에서 사용되고 있는 지표가 정책 목표에 합목적적이고 국가연구개발사업의 실질적인 성과를 제고할 수 있도록 구성되어 있는가를 살펴보았다. 연구의 성격에 따라 학술기초 연구사업, 원천기술 연구사업, 그리고 산업기술 개발사업을 분류된 사업그룹별로 연구의 특성을 반영하는 준거 틀과 실제로 사용하고 있는 지표를 비교하였다. 그 결과 아래와 같은 세 가지 유형의 문제점이 도출되었다. 첫째는 연구 성격이나 연구 활동의 수행 단계에 맞지 않는 불필요한 지표들이 활용되고 있는 경우이다. 여기에는 연구수행단계 또는 연구 성격을 감안하여 볼 때 꼭 필요하지 않은 지표임에도 불구하고 채택이 되고 있거나, 하나의 평가지표로 충분히 점검이 가능한데에도 불구하고 유사한 여러 가지의 지표들이 사용되는 경우를 포함하고 있다. 둘째는 지표의 구성에 있어 연구사업의 성공요인을 반영하지 못하고 있는 경우이다. 여기에는 특정한 연구수행단계의 성과를 평가하는데 필요한 지표들이 제외되어 있거나, 연구의 특성에 대한 고려가 이루어지지 않은 상태로 불필요하거나 반복적인 지표가 채택되는 경우를 포함하고 있다. 셋째는 추상적이며 측정이 어려운 지표를 채택하고 있는 경우이다. 여기에는 지표에 대한 정확한 정의가 이루어져 있지 않아 피 평가자가 불필요하거나 과다한 평가 자료를 준비해야 하거나 평가자로 하여금 평가 시 혼돈을 유발할 가능성이 있거나, 또는 상위개념의 평가항목과 하위개념의 평가항목이 혼재되어 구분이 모호한 경우를 포함하고 있다.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2017.11a
• /
• pp.3-48
• /
• 2017

우리나라 연구개발(R&D) 투자는 2014년 기준 세계 6위, GDP 대비 총 연구개발비 비중은 4.29%로 세계 최고 수준으로 조사되었다. 또한 정부 R&D 예산은 지속적으로 증가하는 추세를 유지하고 있으며, 연구개발비 투자 규모 증대에 따라 국가과학기술역량의 양적 증대뿐만 아니라 질적 수준 또한 향상되고 있는 것으로 평가되고 있다. 뿐만 아니라 연구성과의 활용 측면에서 기술사업화로 연계가 큰 폭으로 증가한 것으로 조사되었다. 반면 R&D 예산 및 성과 활용의 양적 질적 증대가 이루어졌음에도 불구하고 다수의 연구성과가 사업화로 연계되지 못하고 휴면 상태로 있다는 조사결과도 있다. 이에 본 연구는 막대한 예산, 특히 정부 R&D 예산 투입에 의하여 창출되는 연구성과가 기술이전뿐만 아니라 사업화까지로 연계될 수 있도록 영향을 미치는 요인을 선행연구 분석을 통해 도출하고, 각 요인 간 영향 및 기술사업화에 영향을 미치는 핵심요인에 대해 정량적 데이터 분석을 수행할 것이다. 본 연구는 기술의 이전 및 사업화에 관한 연구를수행함에 있어 결정주체, 정책/제도 등의 관점에서 분석한 정태적 접근과, 사업화 전체 프로세스의 관점에서 분석한 동태적 접근을 포괄하는 통합적인 연구라는 점에서 의의가 있으며, 본 연구결과는 산 학 연 및 정부의 기술이전 사업화 관련자들이 보다 종합적인 관점에서 효과적인 사업화 전략 수립을 통해 성과 확산에 기여하는데 정책 자료로 활용될 수 있을 것으로 기대된다.

• Korean Journal of Construction Engineering and Management
• /
• v.24 no.1
• /
• pp.3-11
• /
• 2023

According to the post evaluation scheme in Korea of a public construction project which is more than 30 Billion KRW, project performance is evaluated by investigating outcomes and effects of the construction after the completion of the project. The current post evaluation results can be used for planning and estimating a construction project in the future. However, it is not easy to utilized for an on-going project because the system does not provide the phase-based performance of a project. Although project planning performance is important for project initiation, few attempt has been made to evaluate planning performance in Korea. The purpose of this study is to provide a conceptual performance evaluation of planning performance using preliminary feasibility study conducted by Korea Development Institute. This study developed a planning performance database using data extracted from preliminary feasibility study reports of the completed 354 road construction projects. This study analyzed the performance of the planning stage of road projects by developing absolute metrics such as standard construction cost and standard construction schedule based on a Lane-Km. Using the standard construction cost and schedule metrics, the planning performance was analyzed by project characteristics. The results of this study can be used for phase-based performance evaluation from planning phase to construction phase.

• Journal of Digital Convergence
• /
• v.19 no.12
• /
• pp.51-62
• /
• 2021

This study developed the factors capable of systematic/comprehensive evaluation of the task performance in order to strengthen the performance management of the professional career personnel invitation program (PCPIP). To this end, a performance evaluation framework was developed by analyzing existing project evaluation studies based on boundary theory and Kirkpatrick's four-level evaluation model. Afterwords, through two Delphi surveys, evaluation factors that can measure performance in terms of individual and invitation institutions of PCP were derived and validated. With this procedure, five evaluation factors were finally selected: adaptability, connectivity, clarity, compatibility, and expandability. This study has implications suggesting a performance evaluation factors capable of hybrid quantitative/qualitative evaluation for the performance management of PCPIP operated by National Research Foundation of Korea Research since 1994.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2017.11a
• /
• pp.751-751
• /
• 2017

에너지 기술 R&D사업은 그 성과에도 불구하고 수요에 기반한 기획 측면이나 사업화에 있어 성과가 저조한 것으로 평가받아 왔으며, 특히 사업화 추진에 있어 시급한 과제로 '기술 수용성'(Acceptance) 향상이라는 지적이 제기되곤 하였다. 이에 산업통상자원부는 사용자가 R&D 기획, 개발, 검증 과정에 참여하여 사업의 이해도를 높이고 수용성을 제고하는 '에너지기술 수용성 제고 및 사업화 촉진사업'을 2016년부터 추진하고 있다. 그런데, 사회문제해결형 R&D라 부를 수 있는 본 사업은 산업통상자원부의 기존 에너지기술 R&D와는 성격이 다른 새로운 R&D의 모습을 갖는다고 할 수 있으며 그에 따라 그 시행과정에서 사용자, 이해당사자들이 참여하는 등 연구자들은 예전과는 다른 여러 가지 새로운 방법론의 수행을 요구 받고 있다. 본 연구에서는 해당 사업의 기획 및 실행에 참여한 경험을 토대로 성과멘토링, 성과공유 워크숍, 성과지표의 개발, 운영관리방안 등을 통해 '에너지기술 수용성 제고 및 사업화 촉진사업'의 특성 및 향후 개선방안을 논의하고 사회문제해결형 R&D사업에의 발전방안을 제안하고자 한다.

• Journal of Korea Technology Innovation Society
• /
• v.14 no.4
• /
• pp.937-964
• /
• 2011

The research question of this work comes from that there have been disputes for the governance and roles of the Rural Development Agency (RDA), despite of rather excellence performances of Agricultural R&D program supported by RDA. For this reason, I meta-evaluated the internal evaluation system of Agricultural R&D program in RDA, in terms of the four meta-evaluation components such as evaluation paradigm, evaluation resources, evaluation execution and evaluation utilization. The result shows that the most serious problem is rather lower level of evaluation. Object, one of the evaluation paradigms in the R&D evaluation system of the RDA. So, this work suggested the policy alternatives which may lead the R&D evaluation system of the RDA to be developed for the performance-oriented R&D management system.

• Information Systems Review
• /
• v.12 no.2
• /
• pp.189-203
• /
• 2010

Is presenting guidance of information performance measurement as government PRM version 2.0 these common reference models in public sector. Government PRM is consisted of assessment classification system and standard line of sight and performance management standard form. Through this, is sorting performance element and define cause-and effect. Government PRM is supplying measurement categories at assessment classification system, but relative importance for application standard by measurement categories is not presenting. In this study, importance for government PRM's measurement categories been applying by commonness Test of information performance measurement of public sector wishes to deduce estimation and priority. Research model used Fuzzy QFD, and designed so that can reflect well PRM's development purpose. I applied Fuzzy AHP and FPP method that graft together fuzzy theory to minimize uncertainty and ambiguity in that expert opinion. Is drawn to element that "Standard model offer for information department and management" is the most important in government PRM's development purpose. "Quality of service" is showing the highest priority in customer results in measurement category. Importance for government PRM's measurement categories can offer common valuation basis in government and public institution. Hereafter if examine closely quantitative cause-and effect for structure model of measurement classification system when study government PRM more objective and efficient reference model become.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2015.07a
• /
• pp.305-308
• /
• 2015

건설공사 사후평가는 공공건설사업 수행성과를 평가하고 차후 유사사업 추진 시 이를 활용하여 공공건설사업 효율화에 기여하기 위한 제도이다. 국토교통부에서는 발주청별로 실시하고 있는 건설공사 사후평가의 결과정보를 체계적으로 통합 관리하고, 이를 활용할 수 있도록 건설공사 사후평가 시행지침을 기초로 한 건설공사 사후평가시스템을 구축하여 운영 중에 있다. 하지만 사후평가 시행지침의 개정에 따라 입력양식 및 관리항목이 변경되고, 축적된 사후평가 결과정보의 분석기능 등의 부족으로 유사 건설사업 수행시 활용 체계가 미흡한 실정이다. 본 연구에서는 건설공사 사후평가 시행지침의 개정과 분석 및 통계기능 강화를 위해 따라 건설공사 사후평가시스템의 개선방안을 제시하고자 한다. 이를 통해 사후평가시스템의 활용도를 제고하고 유사 공공건설사업 수행시 시행의 효율성을 도모할 수 있으리라 예상된다.