• 대한교통학회지
• /
• 제22권3호
• /
• pp.215-226
• /
• 2004

본 연구는 한국 미국 유럽의 ITS 사업평가방법론을 비교분석(Comparative Analysis)하여 과학적인 국내 ITS사업평가지침 도입방안을 제언하는 것이다. 이를 위해 우리나라의 ITS사업평가의 문제점 및 국외 선진평가방법론을 분석하고 시사점을 도출하여 국내 ITS평가지침을 제도화하기 위한 정책방향을 제언하였다. 국내 외 사례(미국 유럽 한국) 비교분석결과, 국내에서도 중 장기적인 ITS 투자재원의 효율적 배분과 단기적인 시스템운영의 효율화를 위해서 과학적인 ITS평가지침(ITS Evaluation Guideline)의 도입이 제도화되어야 한다. 또한 세부추진방안으로 ITS사업을 지속적이고 반복적으로 모니터링 할 수 있는 ITS사업평가체계의 도입, ITS 서비스의 효과척도(MOE)를 과학적으로 분석할 수 있는 평가기법(운영성능평가, 경제성평가, 사전 사후비교분석, 시뮬레이션분석)정립, ITS특성을 고려한 새로운 평가기법 도입(위험도분석, 행태분석, 시뮬레이션분석) 및 기타 정책적 활용을 위한 지원(평가자료의 데이터베이스화, 한국형 ITS평가용 시뮬레이터개발, ITS사업효과 계량화 등)방안이 필요한 것으로 나타났다.

• 한국문헌정보학회지
• /
• 제45권1호
• /
• pp.51-73
• /
• 2011

이 연구는 학교도서관 평가체제의 개선방안을 제시하기 위한 목적으로 수행되었다. 이를 위해 학교도서관의 경영개선이라는 평가의 본질적 측면과 도서관정보정책위원회의 학교도서관 평가체제 분석과정에서 제기된 문제를 바탕으로 평가체제 개선을 위한 주요 쟁점을 도출하였다. 도출된 쟁점은 평가주관기관, 평가목적, 평가대상 선정, 평가주기, 평가시스템, 평가결과의 활용방안이다. 이 쟁점들에 대해서 설문조사와 전문가 자문을 통해 효과적인 대안을 선정하였고, 그 결과를 종합하여 '시 도교육청 자체평가 모형'을 학교도서관 평가체제 개선안으로 제시하였다. 제안된 평가체제는 학교도서관 평가에 대한 시 도교육청의 자율성과 책무성을 강화하도록 하였으며, 평가결과가 학교도서관에 대한 구체적인 행 재정적 조치와 연계되도록 활용방안을 제시하였다.

• 한국컴퓨터정보학회논문지
• /
• 제10권1호
• /
• pp.209-216
• /
• 2005

수행 평가는 평가자에 의한 평가 오류 가능성, 채점의 공정성과 신뢰도, 타당도 문제, 채점 기준의 모호성, 객관성 확보에 대한 어려움 등의 문제가 야기되고 있다 이런한 수행 평가의 문제점을 해결하고 교사와 학생의 수행 평가 결과에 대한 만족도를 높이기 위하여, 본 논문에서는 회계 원리 과목을 대상으로 수행 평가의 각 영역에서 영향을 미치는 요인을 분석하여 퍼지 소속 함수를 설계하고 퍼지 규칙을 정의하여 추론을 적용하여 객관적이고 신뢰성이 높은 수행 평가 방법을 제안하였다 또한 제안된 수행 평가 방법에서 수행 평가 항목은 형성 평가와 과제 평가로 구분하여 소속 함수를 설계하였다. 제안된 퍼지 수행 평가 시스템을 통해 산출된 수행 평가 결과는 평정자의 채점 오류에 대한 부담을 줄일 수 있으며 학생들에 게는 정확한 기준과 일관성 있는 채점을 통해 공평하고 신뢰성 있는 평가 결과를 제공한다.

• 한국산학기술학회논문지
• /
• 제14권8호
• /
• pp.3732-3738
• /
• 2013

본 연구는 문제중심학습에서 튜터, 동료, 자기평가간의 평가점수를 비교하고 평가주체 점수간의 관련성과 평가주체별로 평가에 영향을 미치는 평가영역을 알아보는데 목적이 있다. 이를 위해 문제중심학습으로 수업받는 간호학과 학생 105명을 대상으로 문제중심학습 효과도구를 가지고 3차에 걸쳐 튜터, 동료, 자기평가를 실시하였다. 수집된 자료는 SPSS WIN(V. 12.0)으로 분석하였다. 연구결과 3차례의 수업 모두 자기평가 점수가 튜터, 동료평가 점수보다 높았다. 평가주체별 점수간의 관계는 3차례의 수업에서 튜터평가와 동료평가간에 관련성이 있었다. 평가주체별 평가에 영향을 미치는 평가영역은 튜터평가는 '문제해결능력'이었고, 동료평가와 자기평가는 '협동학습능력'이었다.

• 영재교육연구
• /
• 제18권2호
• /
• pp.313-341
• /
• 2008

본 연구는 대학교 부설 과학영재교육원 평가에 대한 메타평가를 통해 평가실태를 파악하고 개선안을 제안하는 데 목적을 두었다. 이를 위해 2008년 2월 전국 25개 대학교 부설 과학영재교육원 관계자 및 평가위원 9명의 33명을 대상으로 설문조사를 실시하였으며, 그 응답결과를 분석하였다. 연구 결과, 현행 평가는 총괄기능을 강조하여 획일적 평가가 이루어지는 문제점이 지적되었다 먼저 평가준거 및 평가요소는 구체적이지 않으며, 평가준거는 평가대상 기관의 설립연도, 지역인프라 등을 고려치 않으며, 과학고/영재학교 진학률이나 경시대회 수상실적으로 성과를 평가하는 점이 지적되었다. 또한 평가대상 기관의 연구역량을 평가하지 않았다. 평가위원의 전문성 부족과 평가기간이 너무 짧은 점, 순위를 결정하는 판단을 위한 평가, 평가결과와는 별개로 제시된 개선방향의 불명확성 등이 문제점이었다. 현행 평가의 개선안으로 컨설팅 평가 기능을 강화하며, 과학적 평가기획과 구체적 평가준거를 제시하고, 현장방문평가를 도입하며, 평가결과 및 평가과정이 공개피고 학생과 학부모 만족도를 평가하는 방안이 제안되었다. 나아가 우수 운영사례를 발굴, 파급하고 과학영재교육원 별 자체적 특성과 성과에 따른 평가지표로 평가받도록 개선되어야 할 것이다.

• 가족자원경영과 정책
• /
• 제28권2호
• /
• pp.27-38
• /
• 2024

본 연구의 목적은 메타평가 분석 모형으로 가족센터 평가사업 평가자와 가족센터의 인식 차이를 분석하고 가족센터 평가사업의 쟁점을 도출하여 개선 대안을 모색하는 것이다. 그 결과 평가자와 가족센터 간 집단별 평균은 5점 만점에 평가위원 4.21점, 가족센터 3.20점으로 유의미한 차이가 있었다. 메타평가 구성 요소별 개선 대안은 다음과 같다. 평가환경에서는 여성가족부 지침 내 평가목적 및 활용 내용 구체화, 평가군 재조정이 필요하다. 평가투입에서는 한국건강가정진흥원 내 평가지원 조직 설치, 자체평가보고서 양식 간소화, 정량평가 정보공개, 평가교육 및 컨설팅 사업 체계화가 요구된다. 평가과정에서는 가족지원통합정보시스템 활용도 향상, 정성평가 내용의 구체화, 평가 주체별 평가활용 사업개선, 의사소통 채널 다양화가 필요하다. 평가결과에서는 평가지표 개선과 가족센터 대상 평가 후속 교육 강화가 요구된다. 평가활용에서는 다양한 인센티브 및 하위센터 지원 강화, 우수사례 활용 공유 확산이 필요하다. 이에 평가의 질적 향상을 위해서는 3년 주기로 위탁하여 실시되고 있는 가족센터 평가사업에 대한 제도적 근거를 개선하여 한국건강가정진흥원의 고유사업으로 전환하고, 여성가족부는 가족센터 평가의 전 과정에 대한 모니터링 및 지도점검을 강화할 필요가 있다. 이 연구는 사례연구로서 다양한 정책 서비스 전달체계에 대한 평가제도 개선에 시사점을 제공하였다.

• 직업교육연구
• /
• 제37권1호
• /
• pp.55-75
• /
• 2018

본 연구는 평생교육실습 프로그램의 관련 이해당사자를 기반 하여 평생교육실습 프로그램을 다면적으로 평가할 수 있는 평가척도를 개발하는 데 목적이 있다. 이를 위해 통합연구방법 모형 중 질적연구와 양적연구를 순차적으로 실시하는 순차적 탐구 전략을 적용하였다. 연구과정은 먼저, 평생교육실습 프로그램 관련 문헌분석을 통해 주요 이해당사자를 실습생, 담당교수자, 실습지도자, 프로그램 관리자의 네 집단으로 선정하고, 이해당사자들의 평가관점 및 평가내용을 탐색하였다. 탐색된 평가내용을 보완하기 위하여 현장에서 활동 중인 13명의 전문가를 대상으로 심층면담을 실시한 후, 문헌분석과 심층면담을 통해 도출된 내용을 각 이해당사자별로 평가영역, 평가부문, 평가항목의 위계를 가진 초안을 구성하였다. 구성된 초안은 평가척도의 내용타당도를 확보하기 위해 35명의 전문가 패널을 활용하여 이해당사자별로 각각 2~3회기의 델파이 조사를 시행하였다. 이후 델파이 조사를 통해 전문가들의 의견이 반영된 평가척도를 활용하여 실습생 90명, 담당교수자 22명, 실습지도자 31명을 대상으로 적용하였다. 기술통계값, 타당도 및 신뢰도를 확인하여 평생교육실습 프로그램의 이해당사자별 평가척도를 최종 확정하였다. 본 연구의 결과로 실습생 평가척도는 8개 평가영역, 14개 평가부문, 51개 평가항목, 담당교수자 평가척도는 6개 평가영역, 10개 평가부문, 40개 평가항목으로 이루어졌다. 실습지도자 평가척도는 3개 평가영역, 7개 평가부문, 31개 평가항목으로 완성되었으며, 프로그램 관리자 평가척도는 7개 평가영역, 15개 평가부문, 32개 평가항목으로 구성되었다. 이해당사자 기반 평생교육실습 프로그램 평가척도는 평생교육실습 프로그램의 효과적인 운영을 위해 진행단계에 따른 각 이해당사자 입장의 변수들을 밝혀내어 개발된 것으로서 현장에서 실시되고 있는 프로그램의 내적 충실도를 규명하는 데 유용하고 객관적인 정보를 제공할 수 있을 것으로 기대된다.

• 한국수자원학회:학술대회논문집
• /
• 한국수자원학회 2009년도 학술발표회 초록집
• /
• pp.1729-1733
• /
• 2009

유역에서의 수자원관리에 큰 과제로 대두되고 있는 댐의 탁수문제에 대한 종합적인 대책 마련을 위해서 국내 댐 유역의 탁수발생의 가능성과 탁수 발생시 피해 가능성에 대한 체계적인 검토가 이루어져야 한다. 본 연구에서는 댐의 탁수문제에 대한 종합적인 대책을 마련하기 위해 댐 유역의 탁수 위험도를 평가할 수 있는 방법을 개발하였다. 종합적인 탁수 위험성을 평가하기 위해서 탁수 평가지표를 개발하였고, 이를 통해서 5개 댐 유역에 대한 시범평가를 실시하였다. 탁수 위험도 평가를 위해서 평가 분야를 탁수 취약성과 탁수 피해성, 탁수 영향의 3가지 분야로 구분하여 계층화된 형태로 종합지표화하였고, AHP기법을 적용하여 평가분야와 세부평가지표에 대한 가중치를 결정하였다. 시범평가 결과 5개댐 중 실제 탁수발생 현상은 일부 댐에서만 높게 나타나고 있으나, 대부분의 댐들이 탁수발생 잠재성이 높은 것으로 확인되었다. 평가 대상 댐 중에서는 임하댐과 소양댐 순으로 종합적인 탁수위험도가 높은 것으로 나타났다. 탁수 평가 지표를 개발하기 위하여, 기존의 국내외의 조사결과 등을 토대로 90여개의 탁수관련 인자들을 탁수발생 잠재성, 과거 탁수 발생 여부, 탁수 영향 등의 3가지 분야로 분류하여 최종적으로 7가지의 세부평가항목(강우지표, 유역지질, 토사유출량, 최고탁도, 고탁도 지속기간, 용수이용량, 호소생태기능)을 결정하였다. 7가지의 지표들은 탁수와의 상관성을 고려하여 표준화시켰고, 세부 평가항목들의 가중합이 종합적인 평가지표가 되도록 하였다. 댐의 탁수 위험성에 대한 평가는 댐유역의 종합적인 탁수 위험도 평가와 분야별 평가, 댐별 세부항목 평가로 구분하여 이루어졌다. 시범평가는 국내의 주요 5개 수계별로 1개의 댐을 선정하여 이루어졌다. 추가적으로 AHP의 적용시 생길 수 있는 지표의 중복성과 상호연계성, 평가자의 편향 등으로 인한 문제들을 어떻게 해결하여야 하는지에 대해서도 검토하였다.

• 한국도서관정보학회지
• /
• 제44권2호
• /
• pp.77-95
• /
• 2013

평가지표(evaluation indicator)란 공공기관이나 기업 등에서 공정한 평가를 진행하기 위해 작성하는 문서로서, 평가표 작성에 앞서 그 기준이 되는 사항을 정하고 이를 명시한 문서를 말한다. 평가지표에는 평가기준과 평가요소, 평가항목, 평가방법, 배점 등 평가 전반에 관한 사항이 구체적으로 명시되어야 하며, 이를 통해 평가의 공평성과 투명성을 확보할 수 있다. 본 연구는 공공도서관 운영평가지표의 효용성 정도를 면밀히 분석하여 실제 운영평가에서 개별 도서관 담당자가 평가내용을 이해하기 쉽고, 평가지표를 통해 객관적이고 신뢰성 있는 데이터를 수집할 수 있도록 개선이 필요한 평가지표 항목을 선정하고 이에 대한 개선 내용을 제시하는데 그 목적이 있다. 이를 위하여 본 연구에서는 한국 공공도서관 운영평가지표의 면밀한 분석과 평가지표의 평균 도달률, 운영평가지표와 통계지표와의 비교분석을 통하여 개선이 필요한 항목을 선정하고 이에 대한 개선 내용을 제시하였다. 제안된 내용은 향후 공공도서관의 운영평가지표의 개선에 반영될 수 있다.

• 기술혁신학회지
• /
• 제12권1호
• /
• pp.113-136
• /
• 2009

국가 연구개발사업의 효율성과 생산성을 제고하기 위하여, 정부에서는 '국가연구개발사업 등의 성과 평가 및 성과관리에 관한 법률'을 제정하여 정부 각 부처의 연구개발 사업 성과의 효율성을 증대시키고 있다. 본 논문은 국방연구개발사업 자체평가시스템 측면에서 메타평가를 실시하기 위하여 요인분석(Factor Analysis)을 통한 계층분석적 의사결정기법(AHP, Analytic Hierarchy Process)을 사용한 평가지표를 개발한 결과이다. 국방연구개발사업의 메타평가를 위한 평가요소로서 평가상황, 평가투입, 평가수행, 평가결과 등 4요소로 구분하여 평가지표를 개발하였다. 평가항목 선정을 위하여 평가요소 및 평가지표간 요인분석을 실시하여 Cronbach's ${\alpha}$ 값을 측정한 결과, 평가상황요소는 0.877, 평가투입요소는 0.755, 평가결과요소는 0.792, 평가결과요소는 0.906으로 내적일관성을 고려한 신뢰성은 있는 것으로 나타났다. 그리고 평가요소 및 평가항목별 가중치 산정은 AHP기법을 사용하여 분석하였다. 분석결과 조사자의 전체 일관성 지수는 0.09로 조사자의 일관성은 있는 것으로 분석되었다.