• 제목/요약/키워드: user satisfaction model

검색결과 698건 처리시간 0.031초

텍스트 신뢰도 자질 기반 지식 질의응답 문서 품질 평가 모델 (Text-Confidence Feature Based Quality Evaluation Model for Knowledge Q&A Documents)

  • 이정태;송영인;박소영;임해창
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제35권10호
    • /
    • pp.608-615
    • /
    • 2008
  • 불특정 다수 사용자가 정보를 생성하는 지식 질의응답 서비스에서는 문서의 품질이 검색결과 만족도에 중요한 요소 중 하나이다. 지식 질의응답 문서의 품질 평가에 관한 기존 연구는 조회 수와 추천 수 등의 비텍스트 정보를 이용하여 문서의 품질을 평가하고, 이를 검색 모형에 반영하여 검색 성능을 높이는데 집중하였다. 이러한 비텍스트 정보는 그 유용성이 실험을 통해 증명되었다. 그러나 비텍스트 정보를 이용하여 새로 작성된 문서의 품질을 평가할 경우 심각한 자료 부족 문제가 발생할 수 있다는 단점이 있다. 본 논문에서는 이러한 비텍스트 정보의 자료 부족 문제를 완화할 수 있는 새로운 문서 품질 평가자질로서 문서 내용 자체에 대한 신뢰성을 반영하는 신뢰도 자질을 제안한다. 제안하는 자질은 문서의 내용으로부터 직접 추출되며, 따라서 추천 수나 조회 수 등 서비스 사용자의 참여를 간접적으로 필요로 하는 비텍스트 자질보다 자료 부족 문제에 견고하다는 장점이 있다. 또한 제안하는 신뢰도 자질은 문서 품질 평가에 유용하다고 알려진 비텍스트 자질과 유사하거나 향상된 성능을 실제 지식 질의응답 문서를 대상으로 한 실험에서 보였으며, 추후 효과적인 품질 평가 자질로서 지식 질의응답 서비스의 성능향상에 기여를 할 수 있을 것으로 기대된다.

오픈소스 소프트웨어 기반의 소프트웨어 개발 과정에서 업무 성과에 미치는 영향을 미치는 요인 (The Effect on the Job Performance of Open Source Software Usage in Software Development)

  • 김윤우;채명신
    • 한국산학기술학회논문지
    • /
    • 제17권4호
    • /
    • pp.74-84
    • /
    • 2016
  • 최근 오픈소스 소프트웨어(OSS: Open Source Software)를 사용한 빠른 개발 방식이 많은 관심을 받고 있다. 오픈소스 소프트웨어 사용이 IT 시장의 다양한 요구에 적극적이면서 빠르게 대응할 수 있고, 전 세계의 수많은 개발자들의 참여로 이루어지는 오픈소스 소프트웨어 특성상 신속한 개발, 검증 및 적용이 용이하며 초기 투자비용을 감소시킬 수 있기 때문이다. 하지만 오픈소스 소프트웨어 진입 장벽, 오픈소스 소프트웨어의 성능 및 신뢰성에 대한 잘못된 인식, 기술 지원에 대한 염려, 적절한 오픈소스 소프트웨어의 선택, 저품질의 문서 등의 문제점으로 인해 오픈소스 소프트웨어 도입 및 사용을 꺼려하고 있는 실정이다. 본 연구에서는 소프트웨어 연구개발 과정에서 오픈소스 소프트웨어를 활용하는 정도에 영향을 미치는 기술적, 조직적, 환경적 요인을 식별하고 오픈소스 소프트웨어의 활용이 연구개발에 참여 중인 개인의 업무 성과에 미치는 영향을 분석하였다. 선행연구를 바탕으로 측정도구를 작성하여 오픈소스 소프트웨어를 활용하여 소프트웨어 연구개발을 수행한 경험이 있는 소프트웨어 개발자 대상으로 설문을 실시하였다. 자료 분석 결과 오픈소스 소프트웨어가 가져다주는 기술적 혜택은 오픈소스 소프트웨어의 활용도와 사용자 만족도에 영향을 주는 반면, 기술적 위험은 오픈소스 소프트웨어의 활용도와 사용자 만족도에 영향을 주지 않는 것으로 나타났다. 본 연구의 결과는 소프트웨어 연구개발 과정에 오픈소스 소프트웨어를 활용하고자 하는 기업에게 전략적인 시사점을 제공할 수 있을 것이라 기대된다.

국내 프랜차이즈 기업의 CSR 단계별 평가 및 제고 방안 (The Study on Evaluation of Franchise Corporate Social Responsibility)

  • 박진용;채단비;임지원
    • 한국프랜차이즈경영연구
    • /
    • 제5권1호
    • /
    • pp.109-141
    • /
    • 2014
  • 최근 기업의 사회적 책임 활동에 관한 소비자의 관심은 꾸준히 증가하고 있으며, 이러한 소비자 차원에서의 CSR 이행 여부는 기업의 제품 혹은 서비스에 대한 전반적인 이미지로 평가된다. 뿐만 아니라 이는 기업의 매출액에 직·간접적으로 영향을 미치기도 한다. 이와 더불어 기술력의 부재 등으로 인해 기업의 경쟁력 제고는 점차적으로 힘들어지고 있으며, 소비자들의 구매력 및 만족도 제고를 위한 CSR 수행 등과 같은 기업의 명성에 더욱 의존하는 구조로써 변화되고 있다. 이에 기업들은 여러 자선사업이나 기부활동, 각종 프로그램 지원, 환경 친화적 제품 개발 등과 같은 CSR 수행에 많은 비용을 지출하고 있는 실정이다. 이에 따라 본 연구는 프랜차이즈 업계의 CSR을 통한 소비자의 기업 평판 및 인식 제고, 프랜차이즈 기업이 추구하는 자원(상품 및 서비스) 활용도를 높이고 효과적인 프랜차이즈 업계의 CSR 프로그램 구축방안 마련을 목적으로 한다. 이를 위해 기존 연구 및 국내외 CSR 사례를 통해 수준별 단계 모델을 제시하고, 국내 프랜차이즈 업계가 추구해야 할 CSR의 전반적인 방향성을 제시하였다. 기존연구 고찰 및 국내외 기업들의 CSR 현황 검토를 통한 본 연구 결과, CSR의 단계적 수준은 총 네 가지 형태로 제시되었다. 그러나 사례 검토를 통해 국내 프랜차이즈 기업의 CSR 수준은 1, 2단계의 수준으로 나타나는 것으로 확인되었다.

사회복지기관에 적합한 ESG경영 전략도출 및 성과관리방안 : 천안시사회복지재단을 중심으로 (ESG Management Strategy and Performance Management Plan Suitable for Social Welfare Institutions : Centered on Cheonan City Social Welfare Foundation)

  • 황규일
    • 벤처혁신연구
    • /
    • 제6권3호
    • /
    • pp.165-184
    • /
    • 2023
  • 사회복지기관은 일반기업 또는 공기업 등과는 다른 목적으로 사업을 영위하는 관계로 ESG 실천항목 도출과 모형구축은 다양하고 종합적인 사회복지학적 측면의 연구를 통해 이루어져야 한다. 지금까지 국내 복지기관에서 활용할 수 있는 연구가 아직은 많지 않고 마땅한 ESG 경영활용 지표가 없는 관계로 천안시복지재단의 전략도출과 경영전략 체계수립으로 성과를 최대로 발휘하도록 하여 그 모형을 다른 복지기관에 전파하고 교육 및 훈련을 통해 선도적인 재단으로 거듭나는 것을 목적으로 추진되었다. 재단과 일선 복지기관들이 ESG 경영에 대한 이해와 기관 이미지 및 사업성과에 긍정적 영향을 미치는 실천모형 구축방안에 초점을 두고 재단의 실증분석, 중대성 이슈 분석을 통해 이슈식별과 핵심이슈를 선정하였다. 이를 바탕으로 사회복지기관의 적합한 전략도출과 전략체계수립 후 성과관리 방안을 구축하여 추진체계를 살펴보았다. 환경적·사회적 책임, 투명경영 측면, 안전관리체계 구축, 응급상황 및 예방분야, 이용자(고객)만족체계 구축, 반부패 예방과 청렴 윤리 모니터링 및 평가, 책임감 있는 공급망, 지역사회 참여 및 발전을 위해 지역사회 공헌 프로그램 실행 등 현재 우수하게 추진하는 분야와 앞으로 추진해야 할 항목을 세심하게 도출하였다. 본 연구는 천안시복지재단의 고찰을 통해 ESG경영 정착을 위해 경주하고 있는 노력을 구체적으로 제시하고자 하였다. 따라서 ESG 측정지표를 개발하기 위한 천안시복재재단의 체계적인 개발과정을 유사한 노력을 기울이는 타 기관 및 관련 연구자들이 참고하여 ESG경영을 발전시켜 나가는데 유용한 자료가 될 것으로 사료된다.

대화식 데이터 마이닝 기법을 활용한 자동차 보험사의 인입 콜량 예측 사례 (A Case Study on Forecasting Inbound Calls of Motor Insurance Company Using Interactive Data Mining Technique)

  • 백웅;김남규
    • 지능정보연구
    • /
    • 제16권3호
    • /
    • pp.99-120
    • /
    • 2010
  • 최근 고객들의 비대면 접점 서비스 이용도가 높아짐에 따라, 비대면 채널은 다양한 데이터의 분석을 통해 고객 만족도를 향상시킬 수 있는 유용한 창구로 인식되고 있다. 이러한 비대면 채널의 대표적 영역으로 콜센터를 들 수 있으며, 콜센터 운영에서 고객 만족도에 가장 큰 영향을 미치는 요소는 상담 인력의 규모인 것으로 알려져 있다. 즉, 일정수준 이상의 고객 만족도를 유지하기 위해서는 충분한 상담 인력을 확보하는 것이 관건이지만, 불필요하게 많은 인력을 확보하는 것은 인건비 측면에서 비용의 낭비를 초래할 수 있다. 따라서 부족하지도 않고 넘치지도 않을 정도의 적정 인력을 산출하는 능력은 콜센터 운영의 핵심 경쟁력으로 인식되고 있으며, 최근 콜센터에서는 적정 인력의 규모를 예측하기 위해 WFM(Work Force Management) 업무 전담 부서를 설치하고 콜량을 정확하게 예측하기 위한 노력을 기울이고 있다. 콜량 예측을 위해 현업에서 주로 사용되는 방법은 담당자의 직관에 의존하는 방법으로, 일정기간의 콜량 평균을 담당자가 주관적 판단에 의해 보정함으로써 이루어진다. 하지만 이러한 방식은 담당자의 주관적 성향에 크게 좌우된다는 한계를 갖고 있어서, 최근에는 다양한 예측 모형을 시스템화한 WFMS(Workforce Management System) 패키지가 널리 활용되고 있다. 하지만 이 시스템은 초기 도입 시 매우 고가의 구축비용이 발생하며, 신규 요인 발굴 시 이를 즉각적으로 시스템에 반영하기 어렵다는 한계점을 갖고 있다. 이를 극복하기 위해 본 연구에서는 데이터 마이닝의 대화식 의사결정나무 기법을 이용함으로써, 객관적이면서도 업무 배경 지식을 충분히 활용할 수 있는 예측 모형을 수립하고자 한다. 또한, 본 연구에서 수립한 모형의 정확성 평가를 위해, 국내 최대 규모의 한 자동차 보험사 콜센터의 4년 8개월 간의 실 데이터를 사용한 실험을 수행하고 그 결과를 제시하였다. 실험에서는 기존의 WFMS와 본 연구에서 제안하는 두 가지 모형인 대화식 의사결정나무 기반의 예측 모형, 일반 의사결정나무 기반의 예측 모형의 세 가지 모형에 대해, 다양한 오차 허용범위 하에서의 사고콜 및 고장콜에 대한 예측 적중률을 평가하였다.

MPEG-7 기반 의미적 메타데이터 모델을 이용한 멀티미디어 주석 및 검색 시스템의 개발 (Development of Multimedia Annotation and Retrieval System using MPEG-7 based Semantic Metadata Model)

  • 안형근;고재진
    • 정보처리학회논문지D
    • /
    • 제14D권6호
    • /
    • pp.573-584
    • /
    • 2007
  • 최근 멀티미디어 정보의 양이 매우 빠른 속도로 증가함에 따라 멀티미디어 데이터에 대한 다양한 검색은 매우 중요한 이슈가 되고 있다. 멀티미디어 데이터를 효율적으로 처리하기 위해서는 멀티미디어 데이터가 가지고 있는 의미 내용을 추출할 수 있는 의미 기반 검색 기법이 필요하다. 기존 연구되어온 멀티미디어 데이터의 검색은 주석 기반 검색, 특징 기반 검색, 주석과 특징 기반 검색의 통합 검색시스템이 있다. 이러한 시스템들은 검색 데이터의 생성을 위해 주석자의 많은 노력과 시간을 요구하고 특징 추출을 위한 복잡한 계산을 요구하며, 생성된 데이터는 변화되지 않는 정적인 검색을 수행하는 단점이 있다. 또한, 인간에게 좀 더 친숙하고 의미적인 형태의 검색 방법을 제공하지 못하고 있는 실정이다. 본 논문에서는 MPEG-7을 이용하여 멀티미디어 데이터를 구조적으로 표현하고 효율적으로 추출하기 위한 의미적 메타데이터 기반의 멀티미디어 주석 및 검색시스템(S-MARS)을 구현 제안한다. 본 시스템은 멀티미디어 데이터에 대한 주석이나 검색, 브라우징을 위한 그래픽 인터페이스를 제공하며 멀티미디어 정보를 표현하기 위해 의미적 메타데이터 모델을 기반으로 구현하였다. 멀티미디어 데이터에 대한 의미적 메타데이터 모델은 MPEG-7 표준에 정의되어 있는 멀티미디어 묘사 스키마를 기반으로 XML 스키마를 이용하여 작성하였다. 결론적으로, 제시한 멀티미디어 데이터에 대한 의미적 메타데이터를 XML 형태로 표현하고, XML을 지원하는 데이터베이스 시스템을 이용하여 표준적인 데이터의 상호 교환이 용이하게 이루어질 수 있으며, 의미적 메타데이터를 활용하여 삽입 기반 검색 알고리즘 방법을 제공함으로써 검색에 대한 정확성과 사용자의 검색 만족도를 극대화 시킬 수 있다. 마그마 저장소로의 유입과 마그마 저장소 아래에서 공급되는 모마그마의 성분변화에 의해서 미량원소 함량이 급격하게 변한 것으로 해석된다./^4He$ 비와 $^4He/^{20}Ne$ 비는 $0.0143{\times}10^{-6}{\sim}0.407{\times}10^{-6}$ 범위와 $6.49{\sim}584{\times}10^{-6}$ 범위를 각각 보여주어 대기와 지각성분의 혼합선상에 도시된다. 이는 온천수내 헬륨가스의 대부분이 지각기원임을 의미한다. 죽림온천(JR1)의 경우 맨틀기원의 헬륨가스의 혼합율이 다른 온천에 비해 다소 높은 비율을 보여준다. 이들 동위원소비와 온천수의 pH와는 대체적으로 정의 상관관계가 확인되었다. 아울러 $^{40}Ar/^{36}Ar$비가 $292.3{\times}10^{-6}{\sim}304.1{\times}10^{-6}$ 범위로 대기기원임을 지시한다. Gram 양성, Gram 음성 균주는 Escherichia coli KCCM 11591를 제외하고는 0.8 - 0.95 cm로 항균력이 강했으며, Gram negitive의 Pseudomonas aeruginosa KCTC 1750 에서는 43% 발효주에는 0.95 cm, 45% 고은 발효주에는 0.95 cm의 항균성을 나타냈으며 관능평가에서도 가장 높게 났다. 관능평가에서는 45% 고온 발효주가 가장 높게 나타났으며, 항산화성 실험에 나타난 저온 45%의 갈색도의 측정과는 항산화성에서는 좀 다른 결과를 나타낸다. 그러나 항균성이 가장 높게 나타난 43-45%와 관능평가에서 가장 높게 나타난 45% 고온 발효주를 볼 때 본 연구에서는 고온 발효주 45%가

e-스포츠의 다양한 속성이 유동(flow)과 동일시에 미치는 영향에 관한 연구 (A Study on the Various Attributes of E-Sport Influencing Flow and Identification)

  • 서문식;안진우;김은영;엄성원
    • 마케팅과학연구
    • /
    • 제18권1호
    • /
    • pp.59-80
    • /
    • 2008
  • 인터넷의 급속한 발달과 온라인 사용이 급증함에 따라 e-스포츠와 같은 온라인 게임은 거대한 시장으로 성장하고 있다. 그렇지만, 많은 e-스포츠를 후원하는 기업의 효과를 검증하는 마케팅적 연구는 미진한 상태이다. 있다해도 단순히 온라인 게임과 관련한 연구가 대다수이다. 이에 본 연구는 e-스포츠 스폰서십을 통해 기업의 마케팅 커뮤니케이션 전략 수립을 위한 토대를 마련코자 하였으며 시작단계에 있는 e-스포츠의 향후 연구에 기여하고자 하였다. 중요 변수들은 첫째, e-스포츠의 주요한 게임속성으로 상호작용성, 익명성, 내용확장성을 들고 온라인 상황에서 주요한 매개의 역할로 다루어지는 유동(flow)과의 관계를 살펴보았다. 둘째, e-스포츠의 주요한 게이머속성(스포츠 경기에서의 팀과 플레이어의 속성에서 수정)인 매력성, 유사성, 경기결과가 유동(flow)과 게이머동일시(온라인 게임상황에 맞게 기존 팀동일시를 게이머동일시로 차용)에 미치는 영향관계를 살펴보았다. 마지막으로 유동(flow)과 게이머동일시와의 관계 그리고 게이머동일시와 기업동일시와의 관계를 최종적으로 점검하였다. 연구의 결과, 온라인의 기초적인 특성인 상호작용성은 유동(flow)에 유의한 영향이 있었고 게이머속성에서의 유사성과 경기결과도 유동(flow)에 유의한 영향이 있었다. 그리고 유사성은 게이머동일시에 정의 영향을 미치는 것으로 나타났다. 마지막으로 유동(flow)은 게이머동일시에 그리고 게이머동일시는 기업동일시에 정의 영향이 있는 것으로 나타났다. 결론적으로 e-스포츠를 후원하는 기업의 경우 일반 유저들과 유사한 특성인 가진 실력있는 게이머를 후원한다면 마케팅 효과를 극대화할 수 있다.

  • PDF

지속가능 녹색 도로 조성을 위한 ANP 모델 기반 자전거도로 환경 평가 방안 (A Study on Environmental Assessment of Bikeway based on ANP Model for Sustainable Green Road)

  • 이지환;주용진;박수홍
    • Spatial Information Research
    • /
    • 제20권6호
    • /
    • pp.33-43
    • /
    • 2012
  • 최근 지속가능한 교통체계의 일환으로 자전거는 보행과 대중교통을 연계하는 근거리 녹색교통수단이자 현행 자동차 교통수단의 문제를 해결하기 위한 대안으로 각광 받고 있다. 이미 유럽이나 미국과 같은 선진국에서는 자전거 이용활성화를 위한 연구와 정책들이 나오고 있다. 국내외 대부분의 연구들은 자전거 도로 서비스 수준, 자전거 보관소나 휴게시설과 같은 인프라 선정 등 공급자 중심 자전거 이용 활성화 방안에 대한 내용이 대부분으로 되어 있다. 이에 본 연구에서는 인천시를 대상으로 자전거 이용자 만족도 수준에 초점을 맞추어 대중교통과의 연계성, 이용자 안전성, 자전거 도로 설치 적합성 등을 종합적으로 고려한 새로운 평가 모형을 개발하여 차별화하고자 하였다. 특히, 평가 모형의 신뢰도 향상을 위해 일반적인 다기준 의사결정의 계층화분석과정(AHP) 대신 분석방법 측면에서 평가 지표 간 다중공선성 상관관계를 고려할 수 있는 ANP(Analytic Network Process) 모델을 이용하였다. 결과적으로 인천시 남동구와 부평구에 자전거 도로의 유지관리와 시설물 개선 대상 도로를 사례별로 도출하고 이를 비교 분석할 수 있었다. 본 연구 결과를 통해 자전거 도로 이용의 유형과 목적에 따른 종합 평가 지수를 도출할 수 있었으며 향후 자전거 도로 선정과 개선을 위한 차별화된 정책 의사결정 수립에 활용 가능할 것으로 판단된다.

종합대학 도서관장서의 적정량기준 설정에 관한 고찰 -미국의 종합대학도서관기준을 중심으로- (Problems in Quantification of Adequacy of Academic Library Collections -Critical Analysis of Standards for Academic Libraries in the U.S.-)

  • 정용선
    • 한국문헌정보학회지
    • /
    • 제8권
    • /
    • pp.183-207
    • /
    • 1981
  • Library standards have been the source of considerable controversy, whereas many problems are involved in developing stardard for university library collections. For evaluation purposes, standards should be precise, quantifiable and measurable. In the United States, however, standards for academic libraries are limited to qualitative statements and principles. Quantitative standards, when given, are ususally related to the number of population in the institution being served, or the prescribed quantitative objectives are often arbitrarily formulated by value judgements. The study in this paper attempts to explain the problems involved in developing quantitative standard for academic library collections. Two problems facing in the formulation of the optimal size of collection are identified. One is the theoretically faulty concept of adequacy of collection to meet the situations of diversity of university libraies, and the other is the difficulties in quantification and measurement, along with the lack of concept of adequacy of collection. However, quantification of adequate size of collection is proved to be useful on the pratical level, even though not valid theoretically. ACRL, Clapp/Jordan and Voigt developed formulas or models for setting the optimal size of a library collection for any particular university library. The main purpose of this study is the analysis of the above formulas. ACRL standard was drawn from obervation and analysis of statistcs in leading library collections. In academic field, this judgement appears to have been based on the assumption that a high-grade institution would be apt to have a good library collection. This study criticizes ACRL standard for its failure to include some determinants of measurements, and points out the limitations of the standard. In contrast. Clapp/Jordan developed a formula rather scientifically based upon bibliographical sources. This is similarly empirical but has the advantage of bringing into play the elements which make universities diverse in nature. Both ACRL and Clapp/Jordan formulas share two major defects. (1) the specific subject needs of the collection are not indiacted directly, and (2) percentage rate of growth is an indicator in measuring the potential utility of a collection. Thus both formulas failed to provide a basis for meaningful evaluation. Voigt further developed a model for determining acquisition rates for currently published materials based on bibliographic technique. Voigt model encourages experimentation with different programs and different allocations of input resources, designed to meet the needs of the library's particular population. Standard for university library collections can be formulated in terms of input(traditional indicator), or additionally, in terms of output(cost-effectiveness). Cost effectiveness is expressed as user satisfaction, ability to provide wanted materials within a reasonable time period. Thus simple quantitative method does not cover all the situations of diversity of university library collections, nor measures the effectiveness of collections. Valid standard could not be established without further research.

  • PDF

정보활용교육 주요 토픽과 교원능력개발평가 사서교사 평가지표 비교 연구 (Comparative Study of Information Literacy Education and Librarian Teacher Evaluation Index in Teachers' Competency Development Evaluation)

  • 이민수;김혜진
    • 한국도서관정보학회지
    • /
    • 제53권3호
    • /
    • pp.455-477
    • /
    • 2022
  • 본 연구는 정보활용교육의 주요 토픽과 사서교사 역량 강화를 위해 실시되고 있는 교원능력개발 평가지표의 비교·분석을 통해서 사서교사가 적절한 요소를 통해 평가가 이루어지고 있는지 분석하였다. 이를 위해 1995년부터 2022년 5월까지 문헌정보학 분야 4대 학술지에서 출판된 정보활용교육 관련 논문들을 수집하여 LDA 토픽모델링을 실시하였다. 토픽모델링 결과 20개의 토픽 중 정보활용교육(T10)이 12.0%로 가장 활발하게 논의되고 있음을 알 수 있으며, 도서관 활용수업(T2) 10.4%, 이용자 서비스(T3) 8.8%가 그다음 순으로 나타났다. 반면 독서토론(T7) 3.3%, 독서교육(T19) 2.9%, 인력 관리(T13) 2.1%, 사서교사 직무 만족도(T17) 2.1% 등은 정보활용교육 토픽모델링에서 저조한 토픽들로 나타났다. 또한 학교도서관 사서교사의 수업모형개발(T1)과 교육과정 개발(T20)은 사서교사가 협업수업과 정보활용교육을 진행함에 있어서 필수적으로 수행하는 과정임에도 불구하고 현행 교원능력개발 평가지표에는 고유한 평가지표로 반영되어 있지 않는 것으로 나타났다. 이에 본 연구에서는 교원능력개발평가 사서교사 평가지표 '교육 및 수업 지원' 요소에 '수업모형 및 교육과정 개발'을 추가 평가지표로 제안하였다.