• 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
• /
• 한국정보과학회언어공학연구회 2020년도 제32회 한글 및 한국어 정보처리 학술대회
• /
• pp.518-523
• /
• 2020

본 논문에서는 목적 지향 대화 시스템을 위한 대화 상태 추적 시스템과 사용자 시뮬레이터를 설계 및 제안한다. 사용자 시뮬레이터는 작성된 대화 상태 추적 시스템을 평가하기 위한 용도로 사용된다. 본 논문에서 제안하는 대화 상태 추적 시스템은 대화 기록과 함께 사전에 학습된 대화 기록 및 규칙/통계 기반 추론 시스템의 추론 결과를 입력으로 받는다. 그리고 입력된 발화 기록 중 마지막 사용자 발화의 사용자 목표와 개체명 그리고 다음 시스템 발화의 화행을 추론한다. 또한, 작성된 대화 상태 추적기의 성능을 평가하고 분석하기 위해, 주어진 환경에서 시스템과 대화를 수행하며 대화 시스템의 성능을 평가하는 사용자 시뮬레이터를 구현 및 적용하였다. 본 연구에서 수행된 실험과 분석을 통해, 규칙 및 통계 기반의 기반 시스템을 이용해 목표 시스템의 성능 개선이 가능함을 보인다. 또한, 제안하는 사용자 시뮬레이터는 규칙과 통계를 이용해 평가 코퍼스 없이 여러 상황에 대해 대화 시스템의 성능을 평가할 수 있다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 1998년도 가을 학술발표논문집 Vol.25 No.2 (1)
• /
• pp.594-596
• /
• 1998

소프트웨어 인터페이스의 개발은 반복적인 평가와 수정을 통해서 보다 사용자들에게 편리하도록 향상되어간다. 이러한 인터페이스에 대한 평가는 사용성 요소(Usability factor)들을 기준으로 이루어지는데, 개발되는 시스템과 사용자의 특성에 따라 중요한 사용성 요소는 달라질 수 있으며 새로운 평가 기준이 개발될 수도 있다. 지금까지의 인터페이스 평가 방식은 주관적인 사용자의 만족도를 바탕으로 인터페이스의 적합성을 테스트해왔다. 그러나, 기존의 방법들은 평가결과의 분석과 분석결과를 수정에 반영하는 과정에서 많은 문제점을 가지고 있다. 본 논문에서는 이러한 문제점을 해결하기 위해 사용자가 시스템에 대해 가지는 정신 모형에 기반을 둔 인터페이스 평가 방식을 제안한다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 2002년도 추계학술대회 논문집
• /
• pp.215-218
• /
• 2002

감성정보를 디자인 활동에 필요한 정보로 활용하기 위해서는 전체 디자인 프로세스에서 사용자를 최초 컨셉 단계에서부터 참여시켜 관찰 및 평가에 적극 동참케 하는 사용자 참여 디자인이 매우 효과적이다. 이러한 감성 정보 수집 및 평가를 통한 상용자 인터페이스 디자인 개발 프로세스를 MP3 CDP를 대상으로 적용하여 연구를 진행하였다. 최근의 MP3CD Player들은 일반 음악 CD들이 10여곡에서 많게는 20여곡 정도의 분량을 가지고 있는 것에 비해 그 분량이 최고 100여곡 이상에 이르고 있다. 그럼에도 불구하고 MP3CD Player들은 기존의 일반 음악 CD Player의 UI를 소극적으로 수정, 변경하여 사용하고 있는 상황이다. 본 연구는 자체적인 곡 분류방법을 제시하고 있는 ‘H’사의 MP3CD Player를 선정하고 이를 기준으로 초기 디자인에 사용자를 참여시켜 사용자 감성 정보 및 요소들을 효과적으로 평가하여 사용자 중심 디자인을 극대화 시키는 방법을 모색하였다. 제품의 최초 기능 분석시에는 카드인덱스(Card Index)방식을 이용하여 기능을 그룹핑하고 인터페이스를 개선하였으며 이를 토대로 프로토타입을 완성하였다. 이를 사용자가 직접 조작하는 방식을 관찰 분석하여 평가 결과를 토대로 UI 디자인가이드라인을 제시하였다.

• 한국정보과학회논문지:소프트웨어및응용
• /
• 제31권8호
• /
• pp.1062-1072
• /
• 2004

협력적 여과 시스템은 ｛사용자-문서｝의 행렬을 기반으로 사용자에게 웹 문서를 추천하는 데 있어서 효율적인 시스템이다. 그러나 협력적 여과 시스템은 초기 평가 문제와 희박성으로 인하여 추천의 정확도가 저하된다는 단점을 갖는다. 본 논문에서는 협력적 여과 시스템의 희박성과 초기 평가 문제를 해결하기 위하여 사용자 프로파일을 생성시킴으로써 자동으로 선호도를 평가하는 방법을 제안한다. 본 논문에서 사용하는 프로파일은 협력적 여과 시스템에서의 ｛사용자-문서｝ 행렬을 기반으로 생성된 사용자 프로파일에 내용 기반 여과 시스템에서 연관 피드백을 이용하여 생성한 사용자 프로파일을 상호정보의 방법에 의해 병합함으로써 생성한 내용 기반 협력적 사용자 프로파일이다. 생성한 내용 기반 협력적 사용자 프로파일을 정규화시키고, 정규화한 프로파일을 협력적 여과 시스템의 ｛사용자-문서｝ 행렬에 반영함으로써 자동으로 선호도를 평가한다. 제안된 방법은 사용자가 웹 문서에 대해서 선호도를 평가한 데이터베이스에서 평가되었으며, 기존의 방법보다 보다 효율적임을 증명한다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 1999년도 가을 학술발표논문집 Vol.26 No.2 (2)
• /
• pp.72-74
• /
• 1999

본 논문은 웹 기반의 정보 여과 시스템인 WAIR을 이용하여 사용자의 기호를 학습하는 방법을 설명한다. 제시된 방법은 여과된 문서들에 대한 사용자의 반응을 관찰하여 각 개인 사용자의 프로파일을 학습한다. 사용자의 기호를 가장 잘 표현하는 단어들을 찾는데 강화 학습을 사용하였다. 기존의 방법은 사용자의 명시적인 적합성 평가(relevance feedback)를 이용하여 검색 또는 여과 성능을 향상시킨 반면 제시된 방법은 사용자의 기호를 묵시적 적합성 평가를 통해 학습한다. 여과된 문서에 대한 사용자의 행동을 통해 사용자의 명시적 평가를 추측하는 것이다. 약 7,000 여개의 HTML 문서에 대해 7명의 사용자가 약 4주 동안 실제 웹을 대상으로 웹 문서 여과 실험을 실시하였다. 제시된 방법은 기존의 적합성 평가를 이용한 정보 여과 방법보다 각 개인에게 보다 적절한 정보를 제시하였다.

• 한국IT서비스학회:학술대회논문집
• /
• 한국IT서비스학회 2007년도 추계학술대회
• /
• pp.616-620
• /
• 2007

전자상거래에서 사용되고 있는 추천시스템은 사용자들의 프로파일과 이들의 정보를 바탕으로 사용자가 선호할 만한 아이템을 추천한다. 추천시스템에서 널리 사용되고 있는 협력적 필터링 방식은 사용자들 사이의 선호도 평가치를 비교하여 유사 사용자를 선택하고, 아이템에 대한 유사 사용자의 선호도 평가치를 기반으로 하여 추천하고자 하는 아이템에 대한 사용자의 선호도를 예측하는 것이다. 하지만 사용자의 선호도가 적은 데이터로 인한 희소성 문제는 추천시스템의 성능을 저해하는 요인으로 작용하고 있다. 이러한 희소성의 문제는 선호도 평가 자료에 나타난 아이템들의 총수에 비하여 사용자가 선호한 아이템의 수가 아주 적기 때문에 발생하며, 새로운 사용자의 경우에는 아이템에 대한 선호도 평가치가 없어 유사 사용자를 선택할 수가 없어 나타나며 심한 경우에는 아이템을 전혀 추천할 수 없게 된다. 이리할 추천 시스템의 희소성문제를 해결차기 위한 방법은 희소성이 높은 데이터들에 대한 희소성을 감소시키는 것이다. 따라서 본 논문에서는 아이템에 대한 희소성을 조사하여 협력적 필터링에서 희소성 아이템이 MAE에 미치는 영향을 분석하였다. 그리고 희소성 문제를 완화하여 예측 정확도를 높이기 위한 방법으로 선호도가 적은 아이템에 대해 희소성을 최소화하는 연구와 이에 따라 희소성과 MAE의 값을 개선하는 방법을 제안한다.

• 한국경영과학회:학술대회논문집
• /
• 한국경영과학회 1998년도 추계학술대회 논문집
• /
• pp.23-27
• /
• 1998

최근 정보시스템에 대한 품질평가가 사용자만족이라는 개념을 중심으로 이루어져 왔다. 그러나 그것은 단기적인 관점에서의 평가모델로서 장기적인 관점에서의 종합적인 품질평가가 필요하다. 기술적 측면과 인간적 측면의 성공요인을 모두 포함하여 평가차원을 분류하고, 사용자만족에서 희생을 함께 고려하는 사용자가치가지 확장하는 종합적 품질평가모형을 제시하고 국내기업을 대상으로 실증분석해 보고자 한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2006년도 학술대회 2부
• /
• pp.308-312
• /
• 2006

온라인 사용자 조사는 전통적인 사용자 조사 기법의 단점인 높은 사용자 평가 비용, 긴 조사 기간, 평가 장소의 제약 및 사용자 대표성 등을 극복할 수 있는 새로운 대안으로 인식되고 있다. 온라인 특성 상 동시에 수백명의 응답자가 접근 가능하기 때문에 조사 기간을 단축 할 수 있을 뿐 아니라, 상대적으로 많은 응답자의 정보를 수집할 수 있으며, 응답자가 편리한 공간에서 응답자 스스로 질문을 읽고 응답하기 때문에 생각할 여유를 더 많이 제공한다는 장점이 있어 전통적 사용자 조사 기법의 대안으로 많이 활용되고 있다. 특히 시스템의 발전으로 실제 제품 사용 사례를 사진으로 보여주거나 사용자가 직접 조사 시스템상의 에뮬레이터 활용을 통해 직접 제품사용과 유사한 경험을 제공하고 있어 평가 영역 또한 기존 직접 평가와 거의 유사하게 확장되고 있다. 하지만, 설문 응답자에 대한 신원확인 및 온라인 상에서 성실과 활동 수행 등 온라인 사용자 조사시의 신뢰도를 보장한 수 없다는 점과 온 라인 사용자 조사의 수행 결과가 기존의 직접 평가수행 결과와 동일한지에 대한 보장이 없다는 것이 온라인조사시스템 활용의 가장 큰 제약이다. 본 연구를 통해 온라인 사용자 조사의 효용을 높일 수 있는 접근 방법을 제시하기 위하여, 먼저 온라인 설문 조사에 적합한 휴대폰의 사용성 문제 특성을 정의하고, 특성에 대해 효과적인 조사 결과를 도출하기 위한 고려 요소들을 기술하다. 이와 더불어 온라인 설문 조사가 기존 전통적 조사의 대안이 아닌 새로운 효용을 가진 조사 기법으로서 활용 가능성을 주기적으로 제시함으로써, 온라인 사용자 조사에 적합한 설문 항목의 특성을 정의 및 확장하고자 한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2007년도 학술대회 2부
• /
• pp.105-111
• /
• 2007

본 연구는 신제품 개발 과정에서 이루어지는 개념 설계(conceptual design) 단계에서의 효과적인 평가 방법론 제안을 목적으로 한다. 특히, 현재 사용자가 경험하지 못한 미래형 제품설계를 위한 개념 설계 내용이, 사용자의 잠재적 요구사항을 반영하고 사용자가 수행해야 하는 과업을 효과적으로 지원할 수 있는 지의 여부를 평가하고자 한다. 본 연구에서 제안하는 디자인 컨셉 평가 프레임웍은 3단계로 구성되어 있다. Phase 1에서는 제품의 미래 사용환경을 예측한 시나리오를 작성하여 사용 사례를 도출하고 사용 사례에 대한 과업 분석을 수행, 사용자의 수행 과업을 파악한다. Phase 2에서는 이러한 사용자의 수행 과업을 지원하기 위해 필요한 기능적 요구사항을 구현할 수 있는 기술을 체계적으로 파악하여, 기술 지도(Technology Roadmap)로서 전개한다. 이를 통해 디자인 컨셉을 구현하기 위해 현재 활용 가능한 기술 대안을 파악한다. Phase 3에서는 기술 지도를 통해 파악한 현재의 요소 기술 및 미래의 기술 대안과 사용자 요구사항간의 연관관계를 분석, 제품 개념 설계에 반영되어야 할 설계 요구사항을 도출하여 평가항목을 구성한다. 본 연구의 디자인 컨셉 평가 방법은 CSCW(Computer Supported Cooperative Work)기반 시스템의 실감 사용자 인터페이스(tangible user interface) 개발 사례를 통해 검증하였다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 2부
• /
• pp.1-6
• /
• 2008

최근 제품이나 서비스를 기획할 때, 사용자 경험 (User Experience)의 측면에 대한 고려를 해야 한다는 이야기가 많아지고 있다. 이는 기능이나 성능을 결정할 때 기능 추가, 몇 %의 성능 상승같이 좁은 방법으로 제품이나 서비스의 기획의 방향을 결정하는 것이 아니라, 사용자가 그 기능이나 성능에서 대해서 어떻게 느끼고, 기능이나 성능을 통해서 어떤 경험을 했는지에 대한 전반적인 고려가 필요하다는 것을 여러 분야에서 공감하고 있다는 증거라 하겠다. 그러나 사용자 경험이라는 개념이 명확하게 정의되어 있지 않고, 그에 대한 실증적인 연구가 부족하여, 더 나은 사용자 경험을 제공하기 위해서 어떤 노력이 필요한지에 대해서 명확하고 쉽게 파악하기 어려운 실정이다. 기존의 HCI 분야에서는 제품이나 서비스를 평가할 때 사용성 (Usability)에 초점을 맞추어서 사용성 평가 (Usability Testing)를 통해서 정량적으로 문제점을 조사하는 방법론에 대한 연구가 많이 이루어졌다. 그러나 이러한 사용성 평가 는 사용자들의 과업 수행 시간, 과업 수행 여부 등 사용자들이 제품이나 서비스를 통해서 진행하는 결과에 대한 성능 (Performance)에 주목하고 있어서 전반적인 사용자 경험을 중요시하는 현재 HCI 가 가야 할 방향과 현업의 필요와는 부합하지 않는다고 할 수 있다. 본 논문에서는 심층 인터뷰를 통해서 사용자에게 제품 경험에 있어서 중요한 요소를 찾아내고, 각 요소를 이용하여 제품에 대한 사용자의 전반적인 경험을 설문으로 물어본 후 구조방정식 모형분석을 통하여 각 경험 요소의 가중치를 도출하였다. 또한 이러한 가중치를 바탕으로 핸드폰, MP3 플레이어, LCD TV, 냉장고의 실제 제품 평가에 적용하여 사용자 경험을 바탕으로 한 제품 평가를 진행하였다. 또한 이러한 방법론을 한국뿐만 아니라 러시아, 독일, 인도의 사용자들에게도 같은 방식으로 진행하여 실증적으로 본 연구에서 개발된 방법론이 가능한지 여부를 확인하였다.