• 감성과학
• /
• 제23권1호
• /
• pp.41-56
• /
• 2020

본 연구에서는 시각장애인이 시각 외의 잔존감각인 촉각, 청각, 후각을 활용하여 미술 작품을 감상하고 이해할 수 있도록 도울 수 있는 다중감각 인터랙션 기술을 제안한다. 나아가, 다중감각 인터랙션의 설계 적합성을 평가하기 위해 실제 시각장애인을 대상으로 다중감각 인터랙션 기술이 적용된 시스템을 통해 미술 작품을 감상한 경험에 대한 질적 인터뷰 기반의 사용자 테스트를 수행하였다. 사용자 테스트 결과, 미술 작품에 적용한 다중감각 인터랙션 요소들은 전반적으로 시각장애인으로 하여금 미술 작품 감상 및 이해를 도왔으며, 나아가 다중감각 인터랙션을 통해 미술 작품을 감상한 경험이 만족스러웠다는 긍정적인 평가 결과가 나타났다. 반면, 일부 다중감각 인터랙션 요소는 미술 작품을 감상하는 동안 전혀 인지하지 못하였거나 오히려 미술 작품 감상에 있어서 혼란을 야기했다는 부정적인 평가 결과도 나타났다. 본 연구는 시각장애인의 문화예술 작품 감상의 접근성을 증진할 수 있는 기술적 대안으로서 비시각 다중감각 인터랙션의 구체적인 개발 방향성 및 가이드라인을 제공하는 데 기여하였다. 나아가, 시각장애인뿐만 아니라 아동이나 노인과 같은 비시각장애인도 유니버설 인터랙션 기술을 통해 기존의 시각 위주의 단편적 경험을 넘어선 종합적인 감각적 경험을 할 수 있는 기술 기반을 구축하는데 기여할 수 있을 것으로 기대된다.

• 한국융합학회논문지
• /
• 제11권11호
• /
• pp.175-182
• /
• 2020

본 연구에서는 회화 감상에 도움이 되는 사운드스케이프를 구성하기 위해 딥러닝 기술을 활용하여 클래식 음악을 매칭하는 기술을 소개하고 회화와 음악 매칭이 얼마나 잘 되었는지에 대해 평가할 수 있는 평가 지표를 제안한다. 평가 지표는 리커드 5점 척도를 통한 적합도 평가와 멀티모달 측면의 평가로 진행하였다. 회화와 음악 매칭에 대해 13명의 실험 참가자의 적합도 평가의 점수는 3.74/5.0 이었고, 또한 13명의 실험 참가자의 멀티모달 평가에서 회화와 음악 매칭의 코사인 유사도의 평균은 0.79였다. 멀티모달적 평가는 새로운 사용자 경험을 측정할 수 있는 평가 지표가 될 것으로 기대된다. 또한 본 연구를 통해 시각과 청각의 인터랙션을 제안함으로써 다중감각 예술작품 경험을 향상시키고자 하였다. 본 연구에서 제안된 회화와 음악 매칭이 다중감각 예술작품 전시에서 활용되며 더 나아가 이는 시각 장애인들의 예술작품 감상에 대한 접근성을 높일 수 있을 것이라 기대한다.

• 대한간호학회지
• /
• 제41권4호
• /
• pp.528-538
• /
• 2011

Purpose: The purpose of the study was to examine the effects of multisensory stimulation (MSS) using familiarity on persons with dementia (PWDs) residing in nursing homes in Korea. Methods: A nonequivalent control group with pre and posttests was used. Fifty one PWDs were included if they: 1) were over 65 yr old, 2) were diagnosed with dementia, 3) had no visual or speech impairments, 4) were able to communicate, and 5) had spent more than one month in a nursing home. The experimental group (n=25) received a 55 min MSS program twice a week for 10 weeks. The outcome variables included were cognition, activities of daily living, grip strength, depression, wandering, and aggressive behaviors. Repeated ANOVA was used for data analysis. Results: There were no significant differences in demographics or the main variables at pretest. Cognition, depression, wandering, and aggressive behaviors were significant over time between the two groups. Grip strength was only significant when accounting for interaction between group and time. Conclusion: An intervention of MSS using familiarity was marginally effective in improving cognition, depression, wandering, and aggression. Future study is suggested with a larger sample and longer treatment to retest the effects of MSS.

• 감성과학
• /
• 제24권4호
• /
• pp.139-148
• /
• 2021

본 연구의 목적은 뇌성마비 아동에게 다감각스토리텔링에 기반한 활동중심중재를 적용하고 사회적 상호작용에 미치는 영향에 대해 알아보는 것이다. 유사실험연구로 단일눈가림, 두 집단 사전-사후검사로 설계하였고, 경직형 뇌성마비로 진단받고, 대동작기능분류체계(GMFCS) I~III단계에 속하는 7~8세 아동 24명을 대상으로 하였다. 실험군과 대조군에 12명씩 무작위 배정하고 아동과 보호자는 집단이 어디에 속하는지 알 수 없도록 하였다. 집단별 프로그램은 회기당 60분, 주 2회, 8주간, 총 16회기 동안 진행되었고, 실험군은 다감각스토리텔링에 기반한 활동중심중재를 하였고, 대조군은 구조화된 신체활동을 실시하였다. 아동의 중재 전과 후에 사회적 상호작용의 변화정도를 확인하기 위해 또래관계기술척도를 사용하여 측정하였다. 수집된 자료는 SPSS 25.0 for windows (IBM Corp, USA) 프로그램을 이용하여 분석하였고, 통계적 검증을 위한 유의수준(α)은 0.05로 하였다. 실험군과 대조군의 또래관계기술의 집단 내 변화는 윌콕슨부호순위검정(Wilcoxon Signed-Rank test)으로 확인하고, 두 집단 간 변화량 차이의 비교는 맨휘트니검정(Mann-Whitney U test)으로 분석하였다. 연구결과 또래관계기술의 집단 내 변화에서 또래관계기술의 전체 값과 하위평가의 협동과 공감영역에서 실험군과 대조군 모두 유의한 차이가 있었고, 주도성 영역에서는 실험군은 유의한 차이를 나타냈으나 대조군은 유의한 차이가 없었다. 두 집단 간 변화량 차이에서 또래관계기술의 하위평가의 주도성영역과 전체 값에서 유의한 차이를 나타냈고, 협동과 공감 영역에서는 유의한 차이가 없었다. 본 연구에서는 뇌성마비 아동을 대상으로 다감각스토리텔링에 기반한 활동중심중재를 적용하여 또래관계기술에 유의한 향상을 확인하였다. 다감각스토리텔링에 기반한 활동중심중재는 뇌성마비 아동의 사회적 상호작용에 효과적인 중재방법으로 제안할 수 있다.

• 한국컴퓨터정보학회논문지
• /
• 제24권11호
• /
• pp.61-69
• /
• 2019

본 연구에서는 문화유산 교육을 위한 다중 감각 (시각 청각 촉각) 지원 기반 증강현실 시스템을 제안한다. 제안된 시스템에서는 3D프린트 된 유사유물 모델을 AR 타깃으로 활용하고, 증강하는 가상객체에는 실제유물 기반으로 구현된 3D그래픽을 매핑한다. 사용자는 3D프린트 된 모델의 촉감을 느끼면서 AR유물학습을 진행할 수 있어 다중 감각을 통한 상호작용을 경험하게 된다. 기존 문화유산 교육 시스템과 비교했을 때 본 시스템은 시각 및 청각뿐만 아니라 촉각을 제공하는데 중점을 두고 설계되었다. 또한 이 시스템은 3D모델을 사용하여 직접적인 상호작용을 제공하여, 주로 휴대전화와 태블릿의 2D 디스플레이에 터치 또는 클릭 모션으로 상호작용하는 기존 시스템보다 훨씬 사실적인 경험을 주도록 구성되었다. 사용자 테스트 결과에 따르면 본 유물교육시스템은 사용자에게 우수한 현존감 및 학습 몰입감을 제공하였으며, 타깃의 사용성 평가에서는 본래 유물과 모양이 유사한 3D 프린트 된 타깃의 사용성이 가장 좋게 평가되었다.

• 대한감각통합치료학회지
• /
• 제8권1호
• /
• pp.41-49
• /
• 2010

목적 : 다감각 통합은 인지과제나 운동실행을 위해 다양한 감각정보를 사용하는 데 있어서 필수적인 처리과정이다. 특히 시각 및 체감각의 통합은 운동 행동의 주요한 요소이다. 본 연구는 감각통합 과정의 시간적 경로와 뇌의 담당 위치를 파악하기 위해 신경생리학적 연구방법을 사용하여 시각과 체감각의 통합과정과 관련된 뇌의 시간적 및 공간적 특성을 조사하였다. 연구 방법 : 실험실 상황에서 시각과 촉각 자극을 독립적으로 또는 동시에 제시하고 유발전위검사(ERP: Event-Related Potentials)를 통해 통합작용 시 뇌에서 일어나는 신경세포들의 전기생리적활동을 측정하였다. 이때 시각 과 촉각을 각각 제시하여 얻은 유발전위신호들의 선형합과 두 개의 자극을 동시에 제공하였을 시 발생되는 유발전 위신호를 측정하여 비교하였다. 결과 : 시각과 촉각을 독립적으로 각각 제시하여 얻은 유발전위신호(SUM)의 합과 두 개의 자극을 동시에 제공하여 얻은 유발전위신호(SIM)는 같지 않았다. 특히나 자극의 반대측인 오른쪽 일차체감각영역(C4)에서 SIM은 SUM 보다 특정시간대에 통계적으로 유의미한 차이를 보였으며, Bilateral parietal areas(P3, Pz, P4) 뿐만 아니라 일차 시각영역(O1,O2)에서도 두 조건간 추가적인 통합관련 신경활동전기신호에 의한 통계적으로 유의미한 차이를 나타내고 있다. 결론 : 뇌 속에서 2개 이상의 감각이 통합될 경우 이와 관련된 추가적인 신경세포활동이 일어나고 있으며, 이는 다 감각을 동시에 제공할 경우 뇌의 활동을 더욱 활발하게 촉진시키고 있음을 시사한다.

• 한국항해학회지
• /
• 제24권3호
• /
• pp.133-140
• /
• 2000

The paper deals with the implementation of prototype Ship Simulator system (VRSS) by Virtual Reality techniques with Head Mounted Display (HMD) device. The prototype VRSS was consists of PC-based human sensors, object oriented operating system. In addition, two kinds of databases arranged from Head Related Transfer Functions and 3D object models were used to create 3D sea sound, and to construct virtual world, respectively. Using the prototype system, we carried out some simulation tests for the overtaking situation to prevent collisions at sea, and discussed on the usability of the system. As results from simulations, the prototype VRSS can provide multisensory and interactive display environment. The results gave rise to the user interaction with 3D objects that give realistic reproduction of navigational environments under a given scenario. Thus, we found that the prototype VRSS should be one of the next-generation ship simulation system.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 2부
• /
• pp.552-557
• /
• 2008

'디지로그 북 (Digilog Book)' 은 아날로그 책과 디지털 콘텐츠의 장점을 통합함으로써, 아날로그적 감성과 디지털 오감을 함께 느끼도록 개발하고자 하는 새로운 개념의 차세대 전자책이다. 기존의 책이라는 콘텐츠 위에 디지털적인 내용을 삽입하여 책을 보는 독자가 시각, 청각, 촉각을 자극하는 다양한 경험을 입체적으로 즐기게 한다. 또한 책에 있는 내용을 디지털 스토리화하여 독자의 선택에 따라 각기 다른 내용을 경험할 수 있으며 책이라는 인터페이스 공간을 통해 상호작용을 할 수 있다. 본 논문은 이러한 개념 연구과정에서 디지로그 북 응용시나리오를 중심으로 디지털스토리텔링 및 상호작용체험의 내용을 만들어 구체화시키고 시각화해 봄으로써 책을 기반으로 한 디지털스토리텔링 및 상호작용의 내용과 범주를 확인할 것이다. 이처럼 응용시나리오에서 확인된 내용은 디지로그 북 저작이 가능하도록 하는 저작도구개발을 위한 내용구성, 화면구성, 저작기능 정의, 저작인터페이스, 저작시스템 구성 등 저작기술개발의 방향과 지침을 만드는 지표로 삼을 수 있을 것이다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제28권3호
• /
• pp.67-77
• /
• 2022

자연풍에 의한 감각은 대부분의 사람들이 일상 생활에서 경험하는 가장 흔한 느낌 중 하나이다. 그러나 가상현실 환경에서 자연풍이 어떻게 재현될 수 있는지, 인공풍이 결합된 다감각 콘텐츠가 인간의 정서를 개선하는지에 대한 연구는 거의 수행되지 않았다. 이러한 문제를 다루기 위해, 본 연구는 녹화된 영상 및 바람 데이터를 기반으로 하는 Wind Reproduction VR System 을 제안하고, 이 시스템이 사용자의 정적 정서에 주는 영향을 확인하는 연구를 진행한다. 실험을 위해 요트상에서 360 도 영상과 함께 풍향 및 풍속 데이터를 수집했다. 수집한 데이터는 제안한 시스템을 통해 다감각 VR 환경을 만드는데 사용되었다. 총 19 명의 대학생들이 실험에 참여했으며, K-PANAS(Korean version of Positive and Negative Affect Schedule)를 통하여 참가자들의 정서 변화를 측정했다. 실험 결과, 인공풍이 추가된 요트 VR 콘텐츠 체험 이후 참가자의 '영감을 받다', '활기차다' 정서가 유의하게 증가하였다. 뿐만 아니라, 바람의 유무에 따라 '흥미롭다' 정서가 가장 큰 영향을 받는 것으로 확인하였다. 제안한 시스템은 인터랙티브 미디어, 체험형 콘텐츠와 같은 다양한 VR 응용 프로그램에서 효과적으로 활용될 수 있다.

• 한국콘텐츠학회논문지
• /
• 제21권9호
• /
• pp.75-87
• /
• 2021

본 연구는 가상현실 안전교육 콘텐츠의 기획과 제작에 참고할 수 있도록 내용 구성 단계별 인터랙션 디자인 특성을 도출하는 것을 목적으로 하였다. 선행연구를 토대로 VR 안전교육 콘텐츠 구성의 특성과 VR 사용자 인터페이스의 분류, 인터랙션 유형, 인터랙션 방식, 인터랙션 구성 요소들의 관계를 정리하여 인터페이스의 관계 분석 틀을 제시하였으며, VR안전교육 콘텐츠 사례 분석을 통해 비상 상황 대응절차 지식의 습득, 사고 상황 체험 학습 그리고 내용의 확인 및 평가의 세 가지 구성단계에서 각각 다음과 같은 상호작용 디자인 특징을 가지고 있음을 확인하였다. 첫째, 학습자 체험단계에서 교육 핵심 체험을 강조하기 위하여 행위 충실도를 높이고 일반적이고 반복적인 행동은 간략하게 축소하여 체험의 질을 조절하는 것이 드러났다. 둘째, 학습자가 생소한 환경에서 안전 행동 절차에 대한 정보 습득을 위하여 주요 상호작용 대상물을 쉽게 인지할 수 있도록 공간UI나 화살표나 상징을 활용한 기표, 행위를 구체적으로 지시하는 게시글 및 다감각 신호를 활용하여 사용자 체험 자유도를 낮추는 방식으로 필수 행위를 강조하고 인지적 인터랙션을 위한 비사실적 방식 인터랙션 비중이 증가하는 것으로 나타났다. 마지막으로 체험의 확인과 평가 단계에서 사고 상황 후 신체손상 등의 부정적 경험을 은유적으로 경험하도록 하는 메타UI를 활용하고 3인칭 시점이나 반복재생의 방식으로 학습자의 체험을 객관적 시각으로 환기하는 것이 활용되었다. 또한 이러한 특성과 관련하여 인터랙션 차원에 따른 요소들의 관계를 도출하여 제시하였다.