• 제목/요약/키워드: evaluation of user's satisfaction

검색결과 227건 처리시간 0.03초

정보활용교육 주요 토픽과 교원능력개발평가 사서교사 평가지표 비교 연구 (Comparative Study of Information Literacy Education and Librarian Teacher Evaluation Index in Teachers' Competency Development Evaluation)

  • 이민수;김혜진
    • 한국도서관정보학회지
    • /
    • 제53권3호
    • /
    • pp.455-477
    • /
    • 2022
  • 본 연구는 정보활용교육의 주요 토픽과 사서교사 역량 강화를 위해 실시되고 있는 교원능력개발 평가지표의 비교·분석을 통해서 사서교사가 적절한 요소를 통해 평가가 이루어지고 있는지 분석하였다. 이를 위해 1995년부터 2022년 5월까지 문헌정보학 분야 4대 학술지에서 출판된 정보활용교육 관련 논문들을 수집하여 LDA 토픽모델링을 실시하였다. 토픽모델링 결과 20개의 토픽 중 정보활용교육(T10)이 12.0%로 가장 활발하게 논의되고 있음을 알 수 있으며, 도서관 활용수업(T2) 10.4%, 이용자 서비스(T3) 8.8%가 그다음 순으로 나타났다. 반면 독서토론(T7) 3.3%, 독서교육(T19) 2.9%, 인력 관리(T13) 2.1%, 사서교사 직무 만족도(T17) 2.1% 등은 정보활용교육 토픽모델링에서 저조한 토픽들로 나타났다. 또한 학교도서관 사서교사의 수업모형개발(T1)과 교육과정 개발(T20)은 사서교사가 협업수업과 정보활용교육을 진행함에 있어서 필수적으로 수행하는 과정임에도 불구하고 현행 교원능력개발 평가지표에는 고유한 평가지표로 반영되어 있지 않는 것으로 나타났다. 이에 본 연구에서는 교원능력개발평가 사서교사 평가지표 '교육 및 수업 지원' 요소에 '수업모형 및 교육과정 개발'을 추가 평가지표로 제안하였다.

국가기록포털 검색서비스 품질 점검을 위한 평가셋 구축 및 현황 분석 (Test Set Construction for Quality Evaluation of NAK Portal's Search Service and the Status Analysis)

  • 나정호;소현기;염경록;이정옥;오효정
    • 한국기록관리학회지
    • /
    • 제22권4호
    • /
    • pp.25-43
    • /
    • 2022
  • 기록을 관리하는 궁극적인 목적은 안전한 보존과 효율적 활용이다. 그러나 공공기록물 관리의 수장인 국가기록원의 검색서비스인 국가기록포털은 검색 시스템이 도입된 지 10년이 넘어 노후화되었고, 검색도구도 이원화되어 있다. 또한, 국가기록물을 열람하고자 하는 이용자의 검색 만족도를 충족시키지 못해 개선이 필요하다. 본 연구는 국가기록물 검색 고도화를 위한 사전 연구로, 현재의 국가기록원 검색시스템의 검색 품질 현황을 파악하는 것을 목적으로 한다. 이를 위해 국가기록원에서 사용 중인 검색도구인 CAMS와 국가기록포털의 현황을 분석하고 검색서비스 품질을 점검하기 위한 평가셋을 구축, 이용자 관점에서 국가기록포털의 검색 품질 평가를 실시하였다. 국가기록포털의 성능평가를 위한 척도로는 정확률과 재현율, F-score, MRR 등을 활용, 다양한 각도에서 분석하였다. 검색 품질 평가결과 전반적으로 검색 성능이 낮은 것으로 나타났으며, 특히 '주제별상세검색'의 경우 정확률, 재현율, MRR이 모두 낮게 나와 개선이 시급할 것으로 보인다. 본 연구를 통해 구축된 평가셋이 향후 국가기록원 검색시스템의 고도화 이후 시스템의 성능이 얼마나 개선되었는지를 객관적으로 측정할 수 있는 기틀로 활용되기를 기대한다.

학습자 트레이싱을 통한 원격 교육용 자가 진단 모듈 개발 (The Development of On-line Self-Test Module using Tracing Method)

  • 이규수;손철수;박홍준;심현;오재철
    • 정보처리학회논문지A
    • /
    • 제19A권3호
    • /
    • pp.147-154
    • /
    • 2012
  • 창의력이나 문제해결력과 같은 고차원적인 사고 능력은 주어진 문제의 정 오답만으로는 진단이 어려우며, 진단을 위해서는 교수자가 학습자의 문제 해결 과정을 지켜보거나 해결 과정에 대한 학습자의 보고 과정이 요구된다. 더구나 교수자의 학습자에 대한 관찰이 불가능한 온라인 학습이나 버추얼 클래스와 같은 환경에서는 학습자의 문제 해결 과정을 평가하거나 학습자 스스로 자신의 부족한 부분을 진단하는 것은 더욱 어려워진다. 이러한 문제를 해결하는 최선의 방법은 학습자가 문제를 해결하는 동안을 추적하여 그 과정을 보고해 주는 것이라 할 수 있다. 본 연구에서는 MS 오피스군의 소프트웨어를 활용하여 주어진 문제를 해결하는 동안 학습자의 작업 내역을 트레이싱하여 최종적으로 학습자에게 자신의 부족한 부분을 진단해 주고 자신의 능숙도와 소프트웨어를 응용하여 주어진 문제를 해결하는 과정에 대한 평가를 해주는 모듈을 개발하였으며, 본 진단 모듈의 효용성 평가를 위하여 실제 MOS 시험을 준비하는 학습자 81명에 대한 적용 및 만족도 조사를 통하여 통계적으로도 유의미한 효과가 있음을 확인하였다.

사용자 설문분석을 통한 군수품 시험성적서 정보서비스 고도화 방안에 대한 연구 (A Study on the development of Test Report Information Service(TRIS) by User survey analysis)

  • 박동수;이동헌
    • 한국산학기술학회논문지
    • /
    • 제18권2호
    • /
    • pp.405-414
    • /
    • 2017
  • 한국군의 군수품 품질보증활동의 일환으로 시험성적서 정보서비스(TRIS)를 통한 시험성적의 신뢰성 확보가 전 분야 및 영역에서 요구되고 있다. 본 연구에서는 군수품 품질보증기관, 시험분석기관, 계약 및 협력업체의 설문조사를 통하여 TRIS에 대한 사용자 만족도를 파악하고, 사용자 그룹별 상세 분석을 통해 개선사항 및 발전방안을 도출하였다. 설문 문항은 Delone과 McLean의 정보시스템 성공모형 모델을 변형하여 작성하였으며, 3개 사용자 그룹 183명에 대하여 수행되었다. 전체 설문분석결과 3개 사용자 그룹에서 모두 시스템교육에 대한 요구가 높았으며, 사용자 그룹별 업무처리 방식에 따라 전반적 시스템의 이해도와 숙련도가 다른 것으로 조사되었다. 사용자 그룹별 세부분석결과, 국방품질보증기관의 경우 군수품의 분야별 계약업체 특성에 따라 사용자를 위한 기능강화가 요구되었으며, 시험기관의 경우 공인기관 인증형태에 따라 TRIS와의 연계방법이 요구되었다. 또한, 업체 사용자 그룹의 경우 계약업체와 협력업체가 TRIS를 운용하는 방식에 차이를 보였으며, 지속적 교육을 통한 협력업체의 인력운용지원이 필요한 것으로 분석되었다. 본 연구 결과는 향후 전 군의 군수품 신뢰성 확보를 위한 국방품질종합정보체계 구축의 기초자료로써 활용될 것으로 기대한다.

사용자 로그 분석에 기반한 노인 돌봄 솔루션 구축 전략: 효돌 제품의 사례를 중심으로 (Implementation Strategy for the Elderly Care Solution Based on Usage Log Analysis: Focusing on the Case of Hyodol Product)

  • 이준식;유인진;박도형
    • 지능정보연구
    • /
    • 제25권3호
    • /
    • pp.117-140
    • /
    • 2019
  • 고령화 현상이 가속화되고, 취약계층 노인과 관련된 다양한 사회문제가 제기됨에 따라 노인세대의 건강과 안전을 보호하기 위한 효과적인 노인 돌봄 솔루션의 필요성이 커지고 있다. 최근에는 노인 돌봄의 수단으로 첨단화된 ICT 기술을 탑재한 스마트 토이를 활용하고자 하는 사례가 늘고 있다. 특히 스마트 토이를 통해 기록되는 노인 행태에 대한 로그 데이터는 노인 돌봄 관련 정책 수립, 노인 돌봄 서비스 컨셉 기획 및 개발과 같은 분야에 정량적이고 객관적인 설명지표로써 활용 가치가 높을 것으로 전망된다. 그러나 현재까지 노인 돌봄 스마트 토이와 관련된 연구 중 스마트 토이를 통해 기록된 사용자 행동 로그에 주목하여 이를 의사결정에 활용하고자 하는 연구는 부족한 실정이다. 본 연구는 기존에 충분히 논의되지 않았던 스마트 토이 사용자 행동 로그 데이터에 대한 분석을 중심으로, 노인 돌봄 솔루션의 사용자 경험 증진을 위한 효과적인 인사이트를 도출하는 것을 목적으로 한다. 구체적으로 사용자 프로파일링 기반 행태 분석과 사용 행태에 따른 삶의 질 변화 메커니즘 도출을 단계적으로 수행하였다. 분석 결과, 5개의 노인 생활관리 요인으로부터 노인집단 유형을 분류할 수 있는 2개의 중요한 차원을 도출하였으며, 도출한 차원에 근거하여 전체 노인 사용자를 3개의 유형으로 분류하고 유형별 스마트 토이 사용 행태 차이를 프로파일링 분석을 통해 확인할 수 있었다. 이후 스마트 토이 사용 행태에 따른 삶의 질 변화 메커니즘을 도출하기 위한 단계적 회귀분석을 수행하였으며, 스마트 토이와의 상호작용, 스마트 토이의 콘텐츠 사용, 스마트 토이가 관찰한 노인의 가정 내 활동 정도가 노인의 우울감 개선과 생활패턴 개선에 미치는 영향 및 이를 중재하는 경로로써 스마트 토이에 대한 사용자의 성능평가와 만족감의 역할을 밝혀내었다.

컨버전스 서비스 평가에 대한 기술의 역설: 텔레매틱스 서비스를 중심으로 (Investigation of "Paradox of Technology" in Service Convergence: Case of Telematics Service)

  • 이상훈;박주한;이호근
    • 경영정보학연구
    • /
    • 제11권1호
    • /
    • pp.19-47
    • /
    • 2009
  • 현재 많은 제품 개발이 기존 제품 또는 서비스에 새로운 형상과 기능을 추가하는 컨버전스를 통해 이루어지고 있다. 그러나 제품 개발에서 컨버전스는 제품사용에 대한 긍/부정적 효과를 동시에 유발하며 나아가 소위 "기술의 패러독스" 문제를 내포하고 있다. 한편으로는 기능성 또는 형상의 추가를 통해 제품의 유용성을 향상시키지만 다른 한편으로는 제품 사용 및 사용을 학습의 복잡성을 증가시켜 사용자의 제품에 대한 만족과 서비스 평가에 부정적 영향을 줄 수 있기 때문이다. 이러한 관점에서 본 연구는 대표적 컨버전스 서비스 사례인 텔레매틱스 서비스를 대상으로 이러한 역설의 문제를 탐색한 실증적 결과를 제시하고 있다. 따라서 본 연구의 모델은 "기능다양성", "사용복잡성", "인지된 유용성", "서비스평가", "서비스적합성"과 같은 변인을 채택하여 기술의 역설의 존재를 검증할 수 있도록 설계되었다. 제안된 연구모델과 이에 따른 가설은 실제 텔레매틱스 서비스 사용자 149명으로부터 자료를 수집하여 PLS를 이용한 경로모형분석을 통해 검증되었다. 연구 결과 첫째, 기능다양성의 증가는 인지된 유용성과는 정의 관계가 있으나 사용복잡성과는 부의 관계에 있음이 확인되었다. 둘째, 사용자의 서비스 평가에 대한 영향은 인지된 유용성이 사용복잡성에 비해 더 큰 영향을 미치는 것으로 확인되었다. 마지막으로 연구 결과 1, 2의 변인 간 인과관계의 강도가 서비스 적합성에 의해 부분 조절되는 현상을 확인하였다. 이러한 연구결과는 컨버전스 서비스와 관련된 사용자의 믿음, 태도를 설명함에 있어서 기술의 역설의 영향을 강조하고 있다.

뇌병변 및 지체 장애아의 보조공학기기 사용 만족도와 심리사회적 영향의 관련성 (Association between Satisfaction with Assistive Technology Devices and Psychosocial Impact among Some Mentally or Physically Disabled Children)

  • 장경례;류소연;박종;한미아
    • 농촌의학ㆍ지역보건
    • /
    • 제42권3호
    • /
    • pp.132-144
    • /
    • 2017
  • 본 연구는 장애인 보조기기 렌탈서비스를 이용하는 뇌병변 및 지체 장애아의 보조공학기기 사용 만족도와 심리사회적 영향과의 관련성을 알아보고자 수행하였다. 연구의 대상은 광주광역시와 전라남도 지역에서 2011년부터 2015년 5월까지 장애인 보조기기 렌탈서비스를 이용하고 있는 뇌병변 및 지체 장애아 120명을 대상으로 자기기입식 설문조사를 통해 이용 장애아의 일반적 특성, 보조공학기기 사용실태와 만족도, 심리사회적인 영향 정도를 조사하였다. 분석방법으로 빈도와 백분율, 평균과 표준편차를 이용하여 결과를 제시하였으며, 대상자의 특성에 따른 보조공학기기 사용 만족도와 심리사회적인 영향 비교는 t-검정과 분산분석을 이용하여 알아보았고, 보조공학기기 사용 만족도와 심리사회적인 영향과의 관련성은 피어슨 상관관계 분석을 실시하여 파악하였다. 연구결과 보조 공학기기 전체 만족도 점수는 $4.08{\pm}0.66$점이었고, 하위영역인 보조기기 만족도 점수는 $4.01{\pm}0.70$점, 서비스 만족도 점수는 $4.14{\pm}0.90$이었다. 장애아의 심리사회적인 영향은 하위영역인 자기욕구 실현능력 $0.99{\pm}0.78$점, 적응력 $1.04{\pm}0.86$점, 자존감 $0.99{\pm}0.74$점이었고, 전체 점수 평균은 $1.00{\pm}0.75$점이었다. 보조공학기기 사용 만족도는 장애아의 건강상태, 주양육자의 학력과 보조공학기기 사용시간에 따라 통계적으로 유의한 차이가 있었으며, 장애아의 심리사회적 영향은 보조공학기기 사용시간에 따라 유의한 차이가 있었다. 보조공학기기 사용 만족도와 심리사회적인 영향은 통계적으로 유의한 양의 상관관계가 있었다(단순상관; r=.503, p<.001 vs. 편상관; r=.440, p<0.001). 결론적으로 본 연구에서는 뇌병변 및 지체 장애인에게 보조공학기기 사용 만족도와 심리사회적인 영향과는 상관성이 있음을 알 수 있었다. 향후 국내 보조공학기기의 효과적인 보급과 활성화를 위해 더 광범위한 장애유형과 서비스 영역을 대상으로 한 연구가 지속적으로 이루어져야 할 것으로 생각된다.

텍스트 마이닝을 활용한 스마트 스피커 제품의 포지셔닝: 인공지능 속성을 중심으로 (Positioning of Smart Speakers by Applying Text Mining to Consumer Reviews: Focusing on Artificial Intelligence Factors)

  • 이정현;선형주;이홍주
    • 지식경영연구
    • /
    • 제21권1호
    • /
    • pp.197-210
    • /
    • 2020
  • The smart speaker includes an AI assistant function in the existing portable speaker, which enables a person to give various commands using a voice and provides various offline services associated with control of a connected device. The speed of domestic distribution is also increasing, and the functions and linked services available through smart speakers are expanding to shopping and food orders. Through text mining-based customer review analysis, there have been many proposals for identifying the impact on customer attitudes, sentiment analysis, and product evaluation of product functions and attributes. Emotional investigation has been performed by extracting words corresponding to characteristics or features from product reviews and analyzing the impact on assessment. After obtaining the topic from the review, the effect on the evaluation was analyzed. And the market competition of similar products was visualized. Also, a study was conducted to analyze the reviews of smart speaker users through text mining and to identify the main attributes, emotional sensitivity analysis, and the effects of artificial intelligence attributes on product satisfaction. The purpose of this study is to collect blog posts about the user's experiences of smart speakers released in Korea and to analyze the attitudes of customers according to their attributes. Through this, customers' attitudes can be identified and visualized by each smart speaker product, and the positioning map of the product was derived based on customer recognition of smart speaker products by collecting the information identified by each property.

기능성게임 메타데이터 통합관리시스템 개발 (A Development of Metadata Integration Management System for Serious Game)

  • 윤선정
    • 한국컴퓨터정보학회논문지
    • /
    • 제18권4호
    • /
    • pp.57-64
    • /
    • 2013
  • 지난 10년 동안, 기능성게임 산업은 지속적으로 성장하여 왔으나 기능성게임에 관련된 메타데이터 정보와 품질정보를 제공하기 위한 안정적이고 신뢰할 수 있는 시스템이 제대로 개발되지 않았다. 기존 시스템은 메타데이터 검색 중심의 기본적인관리 기능만을 지원한다. 따라서 우리는 기존의 시스템의 불편한 사항을 개선할 뿐만 아니라 기능성게임의 품질정보까지 관리할 수 있는 통합된 시스템을 개발하였다. 이를 위해 기능성게임의 품질평가 요소와 품질정보 제공방법 등을 개발하여 시스템에 연계하였다. 나아가 시스템 활용에 관한 사용자의 만족도 평가 조사를 실시하였다. 본 시스템의 장점은 일반사용자, 개발자에게는 유용한 메타데이터 및 품질 정보를 제공해주고, 관리자에게는 기능성 게임에 관련된 모든 정보를 쉽고 편리한 방법으로 관리할 수 있도록 지원하는 것이다.

국가기록포털 검색 품질 개선을 위한 파일럿 시스템 구축 및 실효성 검증 (Construction of Pilot System to Improve Search Quality in National Archives of Korea Portal and Effects Validation)

  • 소현기;염경록;오효정
    • 한국기록관리학회지
    • /
    • 제23권2호
    • /
    • pp.117-135
    • /
    • 2023
  • 국가기록원에서는 국민에게 소장하고 있는 공공기록물에 대한 접근점을 제공하기 위해 국가기록포털이라는 대국민 검색서비스를 운영 중이다. 그러나 지속적으로 검색 결과에 대한 이용자 만족도가 낮다는 의견들이 수렴되고 있으며, 그와 더불어 포털 이용률도 감소하고 있는 추세이다. 본 연구는 이러한 상황을 극복하기 위해 수행한 국가기록포털 검색서비스 품질 점검 연구의 후속 연구로, 국가기록포털의 문제점을 규명하고 그에 따른 개선안을 제안하고, 나아가 그 실효성을 검증하는 것을 목표로 한다. 선행된 품질 평가를 통해 국가기록포털의 주요 문제점으로 검색 도구의 저조한 성능, 검색 결과의 일관성 결여, 기본검색 기능 부재를 비롯한 6가지 문제점을 도출하였으며 이에 대한 개선방안을 규명했다. 제안한 방안의 실효를 검증하기 위해 이 중에서 현실적으로 당장 도입 가능한 방안을 적용한 파일럿 시스템을 구축, 국가기록포털과 검색 성능 비교를 수행하였다. 평가 결과, 파일럿 시스템 검색 도구의 정확률, 재현율, MRR 모든 측면에서 유의미한 상승을 확인하였으며 그 효과를 입증하였다.