• 정보관리학회지
• /
• 제36권4호
• /
• pp.129-159
• /
• 2019

본 연구의 목적은 연구데이터 서비스 자체의 유용성과 연구데이터에 대한 사용경험 기반의 유용성 측면에서 평가 모형을 개발하는 것이다. 다양한 사례에서 도출한 데이터 서비스의 유용성 평가 요소로부터 연구데이터에 내재된 평가척도인 검색성, 접근성, 상호운용성, 재활용성 4개와 각각의 측정지표 총 20개를 도출하였다. 그리고 Google Analytics, YouTube 광고료 책정 기준, 서울특별시, Altmetrics의 사례를 분석하여 연구데이터에 대한 이용자 경험 기반의 유용성 측정지표 12개를 도출하였다. 평가척도와 측정지표에 대한 타당성과 신뢰성 검정을 위해 연구데이터의 잠재적 이용자 164명을 대상으로 설문조사를 실시하였다. 평가척도의 타당성 검정을 위해 KMO Bartlett 분석을 하였으며, 측정지표의 성분분석을 위해 주성분 분석과 베리맥스 회전분석법을 사용하였다. 내재적 평가척도의 경우 4개 척도 모두 KMO Bartlett의 타당성 값을 충족시켰으며, 평가척도에 대한 측정지표의 성분분석 결과 모두 단일 성분으로 나타나 현재의 척도로 해당 지표에 대한 설명이 가능하였다. 그러나 이용자 경험 기반의 12개 측정지표의 성분분석 결과는 2개 성분으로 나누어지는 것으로 나타나 각각을 활용도와 참여도라는 개념의 2개 평가척도로 구분하였다. Cronbach's alpha 계수에 의한 신뢰도 측정 결과 6개의 평가척도 모두 0.6 이상의 측정치를 충족시키는 것으로 나타났다.

• 한국콘텐츠학회논문지
• /
• 제19권5호
• /
• pp.249-258
• /
• 2019

현재는 스마트 홈 사업에 대한 사람들의 관심이 증가하고 있다. 따라서 스마트 홈 시스템에 대하여 연구가 중요해지고 있다. 스마트 홈 시스템에서 중요한 구성 부분인 스마트 홈 앱은 지속적으로 관심을 위해서는 사용성을 고려한 평가지표 개발이 중요하다. 이에 본 논문은 스마트 홈 앱을 대상으로 스마트 홈 앱 디자인의 사용성 평가지표 개발하고자 하는데 있다. 본 연구를 위하여 델파이 기법을 이용하여 3차에 걸쳐 조사를 실시하였다. 1차 조사에서는 문헌고찰을 통해 도출된 평가 영역에 대한 전문가들의 의견을 수렴하고 내용타당도 비율(CVR) 값을 분석하여 적절한 영역 8개를 선정하였다. 1차 조사 결과를 바탕으로 국내외 선행연구와 사용자 인터뷰 조사를 통해 총 38개 평가 항목을 수집하였다. 수집된 38개 평가 항목은 2, 3차에서 평균(M), 표준편차(SD), 내용타당도 비율(CVR), 합의도(H), 수렴도(QD) 등을 분석하고 최종 8개 영역 하위에 포함된 27개 항목을 선정되었다. 본 연구 결과는 스마트 홈 앱 디자인의 사용성 평가 시 가이드라인으로 활용될 수 있다.

• 재무관리논총
• /
• 제9권1호
• /
• pp.245-268
• /
• 2003

전통적인 방법에 의한 PER는 단순히 그 지표의 일반적인 높고 낮음에 따라 소위 '저평가 종목'이라는 이름으로 투자자들에게 추천되고 있다. 그러나 이런 방법은 개별기업의 구체적 내용을 정확하고 종합적으로 고려하지 못하고 있다. 본 연구는 전통적인 방법으로 사용되는 PER지표의 문제점을 개선코자 배당평가 모형으로부터 도출한 PER지표의 구성요소들을 독립변수로 활용 회귀분석을 했다. 그리고 이를 근거로 이론 지표를 만든 후, 그 이론 지표를 투자의사결정에 적용하였을 때의 유효성을 검증했다. PER지표를 구성하는 독립변수는 Kisor & Whitbeck(1963), Malkiel & Cragg(1970), A. Damodaran(1996)에 의해 연구된 것을 원용, PER지표의 구성요소들로 기업의 배당성향, 이익 성장을, 그리고 위험변수로서의 베타계수를 선정했다. 투자성과는 포트폴리오 투자가 일반적인 현실을 감안해 가치가중수익률을 사용한 포트폴리오의 투자성과를 측정했고, 표본은 국내 거래소 시장에 1991년부터 2001년까지 계속 상장된 금융업종을 제외한 전종목을 대상으로 했다. 실증분석에 사용된 기간은 1997년부터 2001년까지 5년 동안의 자료이며, 투자성과를 검증하기 위한 검증모형으로 위험 프리미엄 모형을 사용했다. 먼저 동 분석기간 중 전통적인 방법에 의한 PER효과는 나타나지 않았고, 아울러 기업규모 효과도 찾을 수 없었다. 그러나 회귀분석을 통해 구해진 이론 지표를 활용할 경우, 이론 지표에 비해 시장 지표가 과소 평가된 그룹이 과대 평가된 그룹과 비교할 때 투자성과가 더 우수한 것으로 나타났다. 또한 이론 지표를 통해 PER수준이 낮아짐에 따라 투자성과가 더 높아지는 PER효과도 발견됐다. 이와 같이 이론 지표에 의해 나타나는 PER효과는 기업규모 효과와는 독립적인 것으로 보인다. 외환위기 이후 우리시장에 나타난 차별화 장세 속에 아직도 PER효과나 기업규모 효과와 같은 시장이례 현상이 존재하는지는 관심의 대상이 됐다고 본다. 본 연구에 의하면 기업규모 효과와는 별개의 PER효과가 여전히 존재하며, 다만 이 PER 효과는 전통적 의미의 일반적으로 낮은 PER종목이 초과수익률을 내는 것이 아니라, 기업규모가 크더라도 그 기업의 개별특성을 고려했을 때 이와 비교해 상대적으로 PER가 낮은 종목에 투자하면 초과수익을 낼 수 있음을 의미한다.

• 한국콘텐츠학회논문지
• /
• 제21권11호
• /
• pp.56-63
• /
• 2021

가속화 되고 있는 노령화로 인해 장노년층의 디지털 격차 문제는 점점 심화되고 있다. 이를 해결하기 위한 다양한 스마트 기기 활용 교육이 이루어지고 있지만 기존 강사 대면 교육의 한계와 장노년층의 학습적 특징 등으로 큰 효과를 기대하기는 어려운 실정이다. 이에 장노년층을 위한 휴머로이드 로봇을 활용한 디지털 교육 콘텐츠가 개발되었다. 본 연구에서는 로봇을 활용한 디지털 교육의 사용성을 평가하기 위하여, 먼저 교육 콘텐츠의 사용성을 분석하고, 그 측정지표를 효율성, 이해성, 운영성, 학습성 그리고 만족성으로 정의하였다. 그리고 각 측정지표의 측정방법을 개발하여, 이를 기반으로 기존 대면 교육과 로봇을 활용한 교육의 사용성 평가를 실시함으로써 로봇 활용 교육의 사용성을 검증하고, 그 활용 영역의 확대 가능성을 확인하였다. 발전하고 있는 로봇 기술을 다양한 분야에 성공적으로 적용하기 위해서는 로봇 활용 콘텐츠의 사용성 검증이 필수적이며, 이러한 측정지표 및 측정방법에 대한 연구는 그 기초가 될 것으로 기대된다.

• 정보관리학회지
• /
• 제18권3호
• /
• pp.239-264
• /
• 2001

이 연구는 국내외에서 대학도서관을 대상으로 제안된 평가(성과)지표의 현황을 개관하고 비교·분석하는데 그 목적이 있다. 이를 위하여 지금가지 제안된 지표들 중에서 국제기구(IFLA, ISO)와 관련단체(미국의 ALA/ACR·LARL, 영국의 LA·HEFCE·CERLIM, 일본의 대학기준협회·사립대학도서관협의회, 한국의 대학교육협의회·도서관협회)의 모형을 중심으로 주요 특징과 내용, 장점과 한계를 분석하고, 함의와 시사점을 논급하였다. 대부분의 모형은 전통적 도서관의 양적 지표에 이용자의 인식가치를 포함시키고, 전자형 자료와 서비스를 수용하는 방향으로 나아가고 있다. 그럼에도 각각의 지표에 대한 실효성은 불확실하고 미진하고, 계량화가 불가능한 것도 적지 않으며, 평가도구로 사용하기에 부적합한 것도 있다. 게다가 가장 중요한 구비조건인 가중치가 배정되지 않았거나, 부여한 경우에도 그 논리적 근거가 불분명하다. 따라서 전통적 및 전자형 대학도서관의 투입-과정-산출을 종합적으로 측정·재단할 수 있는 평가지표(명칭 및 구성의 최적성, 가중치와 척도의 적절성 등)의 개발이 필요하다.

• 한국융합학회논문지
• /
• 제12권5호
• /
• pp.31-38
• /
• 2021

최근 일반인의 배뇨활동에 도움을 주는 장치가 개발되고 있으나, 사용자의 배뇨 습관과 기능, 사용자의 접근성 등을 고려한 제품은 부족하다. 본 연구에서는 배뇨활동에 도움을 주는 장치 중 자동 석션 기능 등 융, 복합 기능을 지니고 있는 스마트 자동 소변처리기를 기준으로 사용자의 만족도와 제품의 개선점을 찾고자 사용성평가를 실시하였다. 개발된 사용성평가 지표는 모두 21개이며, 안전성과 조작성, 만족도를 기준으로 개발하였다. 그 결과 기능적인 만족도는 높았으나, 디자인 측면에서는 손잡이 등의 개선해야 할 문제점이 제시되었다. 따라서 본 연구를 통해 자동 소변처리기의 성능측면의 만족도가 제품을 대표할 수 없으며, 제품의 문제점을 찾기 위한 사용성평가 지표 개발의 중요성을 알게 되었다.

• 한국경영정보학회:학술대회논문집
• /
• 한국경영정보학회 2007년도 International Conference
• /
• pp.745-750
• /
• 2007

기업의 성과관리와 성과평가 분야에서 성과지표의 분류는 조직의 내부 구성관계 즉, 수직적 (vertical) 구조(전사-본부-팀)와 수평적 (horizontal) 구조(본부와 본부 혹은 팀과 팀간)의 공유에 따라 구분될 수 있으나 기존 연구(Lipe & Salterio 2000, Dilla & Stcinbart 2005)에서는 공통지표와 고유지표라고 하는 수평적인 측면만이 고려되고 수직적인 측면은 고려되지 않았다는 한계가 있다. 조직의 성과가 향상되기 위해서는 하부조직이 전사 전략에 집중 할 필요가 있으며 이를 위하여 전사의 비전을 위한 전략목표달성에 기여한 정도를 측정하여 보상과 연계하는 것은 성과관리제도가 추구하는 기본 방향이며 도입목적이기도 하다. 그런데 선행 연구에서 밝혀지지 않은 조직구성 관계의 수직적 측면에서 전사지표의 정렬(Alignment)을 통한 공유와 할당(Cascading)된 지표의 가중치를 고려해 볼 때 고유지표는 재 정의하여 세분화 할 필요가 있다는 점이다. 즉, 특정 부서의 지표 중에는 전사 혹은 상위부서에 반영되어 공유하고 있는 고유지표(이하 공유지표)와 전사 혹은 상위부서에는 반영되지 않고 해당 부서만 독점하고 있는 순수한 고유지표(이하 고유지표$^{1}$)로 구분되어야 하며 공유지표와 고유지표의 분류에 따라 가중치 설정이 달라져야 한다는 주장이 그것이다. 따라서 본 연구의 목적은 조직이 성과를 공정하게 평가하고 하부조직이 전사전략에 집중하도록 하기 위해 공통지표와 고유지표를 사용하고 있는데(Dilla & Steinbart 2005), 고유지표를 공유지표와 고유지표로 재 정의하고 분류하여 관리 할 필요가 있다는 점과 각각의 지표 분류에 따라 가중치 설정에 차이가 있는지에 대한 유의성을 검증해 보고자 한다.

• 한국과학예술포럼
• /
• 제20권
• /
• pp.409-419
• /
• 2015

서비스디자인 플랫폼(Service Design Platform)은 지식경제부에서 시행하고 있는 '서비스 융합형 디자인 컨설팅 지원기술 개발사업'의 일환으로 서비스디자인 기업들이 온라인에서 서비스디자인 과제를 원활하게 할 수 있도록 하기 위한 목적으로 개발되었다. 서비스디자인 플랫폼 개발과정에서 플랫폼의 사용성을 검증하고 개선시키기 위해서는 사용자의 참여에 의한 사용성 테스트(Usability Test)와 더불어 전문가에 의한 휴리스틱 평가(Heuristic Evaluation)가 요구된다. 본 연구는 전문가에 의한 휴리스틱 평가를 실시하기에 앞서 평가대상에 적합한 평가영역과 세부 평가항목을 도출하기 위한 목적으로 진행되었다. 연구를 위해서 내부 연구자들이 사용성 영역과 평가대상인 서비스디자인 플랫폼의 특징요소, 설계요소, 커뮤니티 요소 등을 설정하였고, 이를 세부항목에 반영해서 평가지표를 분류하고 도출하였다. 이어서 평가지표에 대한 타당성과 신뢰성 검증을 위해 전문가를 대상으로 델파이 조사를 실시해서 4개의 평가영역과 44개의 세부항목으로 구성된 평가지표를 도출하였다. 도출된 평가지표는 체크리스트로 활용해서 향후 전문가에 의한 휴리스틱 평가 시 활용될 계획이다.

• 기술혁신학회지
• /
• 제12권1호
• /
• pp.113-136
• /
• 2009

국가 연구개발사업의 효율성과 생산성을 제고하기 위하여, 정부에서는 '국가연구개발사업 등의 성과 평가 및 성과관리에 관한 법률'을 제정하여 정부 각 부처의 연구개발 사업 성과의 효율성을 증대시키고 있다. 본 논문은 국방연구개발사업 자체평가시스템 측면에서 메타평가를 실시하기 위하여 요인분석(Factor Analysis)을 통한 계층분석적 의사결정기법(AHP, Analytic Hierarchy Process)을 사용한 평가지표를 개발한 결과이다. 국방연구개발사업의 메타평가를 위한 평가요소로서 평가상황, 평가투입, 평가수행, 평가결과 등 4요소로 구분하여 평가지표를 개발하였다. 평가항목 선정을 위하여 평가요소 및 평가지표간 요인분석을 실시하여 Cronbach's ${\alpha}$ 값을 측정한 결과, 평가상황요소는 0.877, 평가투입요소는 0.755, 평가결과요소는 0.792, 평가결과요소는 0.906으로 내적일관성을 고려한 신뢰성은 있는 것으로 나타났다. 그리고 평가요소 및 평가항목별 가중치 산정은 AHP기법을 사용하여 분석하였다. 분석결과 조사자의 전체 일관성 지수는 0.09로 조사자의 일관성은 있는 것으로 분석되었다.

• 대한교통학회지
• /
• 제33권4호
• /
• pp.417-429
• /
• 2015

본 연구에서는 고속도로에서 수집되는 차량검지기 자료를 대상으로 자료의 품질에 영향을 미치는 요인을 분석하여, 신뢰성 있는 교통자료의 관리 및 활용을 위한 교통자료 품질 통합평가지표를 개발하였다. 이를 위하여 국내외 자료품질평가에 대한 현황 조사 및 분석을 수행하여 시사점을 도출하였다. 품질관리지표는 기존의 고속도로 검지자료 품질평가에 사용되고 있는 평가지표인 완전성과 유효성뿐만 아니라, 이를 수정 보완한 지표들을 제시하였으며, 교통자료의 특성을 반영한 시공간 일관성 지표와 결측심각성 지표를 신규지표로 제시하였다. 또한, 개별 품질 평가지표들을 통합적으로 관리할 수 있는 통합 평가지표를 개발하고 평가 프레임워크를 제시하였다. 통합 품질평가지표는 쌍대비교를 통한 설문조사 방법으로 가중치를 산출하는 AHP기법과 자료의 변동성을 고려하여 가중치를 산출하는 엔트로피방법을 통합하는 혼합가중치 산출 방안을 적용하여 도출하였다. 본 연구의 결과물은 교통자료의 효율적 관리를 가능하게 하고, 교통자료의 품질을 높일 수 있는 품질관리체계의 중요 구성요소로 활용될 것으로 기대된다.