• 한국HCI학회:학술대회논문집
• /
• 2007.02a
• /
• pp.591-597
• /
• 2007

웨어러블 컴퓨팅의 지속적인 발전과 함께, 이들이 지원하는 기능은 점점 다양화되고 전문화되었다. 하지만 기기의 종류와 기능이 늘어나면서 각 기기의 상태를 확인하는 작업 자체가 복잡하고 불필요한 시간을 소요하기도 한다. 또한 이를 시각 디스플레이에만 의존하면, 디스플레이 크기의 한계와 더불어 시각적인 과부하가 발생할 수 있다. 본 연구에서는 이러한 문제를 극복하기 위해 웨어러블 각 기기의 상태정보 피드백으로서 소리를 이용하였다. 실험의 순서는 먼저 시각정보에 더하여 청각정보를 추가적으로 제시하는 방식의 유용성을 검증한 다음, 기기 특정적인 청각 아이콘(Auditory Icon)의 효과를 확인하였다. 청각정보의 유용성을 확인하는 단계에서는 참가자에게 특정 기기의 위치와 그 상태에 관한 정보를 시각 디스플레이를 통해 제시하면서, 조건에 따라 다양한 형태의 청각 디스플레이를 제시하고 기기 및 상태정보 확인에 소요되는 시간을 측정하였다. 시각디스플레이의 방식은 다양하지만, 본 연구에서는 사람의 몸을 나타내는 그림 위에 기기가 장착된 위치를 붉은 점으로 표시하고, 그 상태를 텍스트로 표시하는 방식(실험 1)과 텍스트를 통해 기기의 종류와 상태를 알려주는 방식(실험 2)을 적용하였다. 기기 확인에 소요되는 반응시간을 기록한 실험결과는 시각디스플레이를 통해서만 제시하는 조건보다 시각디스플레이와 청각디스플레이를 동시에 제시하는 조건에서 나은 수행을 보여주며, 정보의 내용이 일정 범위 내에서 구체적으로 제시될 수록 수행이 증가하는 경향을 보여주고 있다. 이어지는 기기 특정적인 청각 아이콘의 효과를 확인하는 단계에서는, 소리의 높낮이를 통해 기기의 위치를 표현하는 대신, 소리만 듣고 기기가 무엇인가를 알려줄 수 있도록, 참가자 평정을 통해 기기 특정적인 청각 아이콘을 선정하고, 이를 상태정보 디스플레이에 추가하였다. 기기의 수와 제시조건은 앞선 실험과 동일하였으며, 역시 기기 및 상태정보 확인에 소요되는 반응시간을 체크하였다. 실험결과는 이전의 실험과 비슷하게 시각과 청각 디스플레이의 중복제시 조건에서 높은 수행을 보였으며, 청각 아이콘의 사용으로 인한 수행의 증가도 확인할 수 있었다. 실험 2에서는 추가적으로 청각 디스플레이의 내용에 대한 주관적인 평정을 실시 하였는데, 기기 특정적인 청각 아이콘은 참가자에게 편의성, 효용성, 적합성, 확신도에서도 높은 점수를 얻었다. 이러한 결과는 청각 피드백을 이용한 정보의 디스플레이는 착용자의 시선을 자유롭게 함으로써 일상생활의 수행을 높이고, 웨어러블 컴퓨터 디스플레이 크기의 제약을 해결하는 방법이 될 수 있는 동시에 주관적인 사용성 측면에서 발전가능성이 있음을 보여준다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.46-51
• /
• 2006

청각 장애인은 집에서 발생하는 여러 가지 소리나 가전 제품의 신호를 감지하지 못하므로 생활의 불편을 상당히 느끼고 있다. 이러한 사람들을 위해 소리 정보를 시각 정보로 변경하여, 사용자들의 시야에 보여주는 것을 목적으로 연구를 시작하였다. 본 연구에서는 집이라는 환경에서 사용자의 위치와 오리엔테이션 정보를 습득하여, 사용자에게 필요한 정보를 시야에 들어오는 범위에 방해되거나 불편하지 않게 표시하는 시스템을 제안한다. 프로젝터에 부착된 카메라를 이용하여 사용자를 인식하고, 사용자를 따라다니며 화면을 디스플레이 하는 기존 방법의 단점들을 해결하기 위해 위치 센서로 사람의 위치와 방향을 파악하여 사용자에게 필요한 정보를 사용자가 현재 바라보는 곳에 디스플레이 하는 방법을 제안한다. 3D 모델로 제작된 집의 구조를 이용하여, 프로젝터의 방향과 초점 제어를 사전에 계산하여 보다 정확한 위치에 정보가 디스플레이 되도록 하였다. 본 논문에서 제안하는 방법이 기존의 PDA 나 PC 모니터를 이용해 정보를 제공하는 방법보다 사용자들이 정보를 인지하는 데 걸리는 시간이 좀더 빠르고 이 방법을 선호하기 때문에, 청각 장애인에게 정보를 제공하는 시스템으로 적합하다는 결론을 도출하였다.

• Science of Emotion and Sensibility
• /
• v.9 no.1
• /
• pp.9-17
• /
• 2006

As is commonly said, music is 'language of emotions.' It is because sound is a plentiful modality to communicate the human sensibility information. However, most researches of auditory displays were focused on improving efficiency on user's performance data such as performance time and accuracy. Recently, many of researchers in auditory displays acknowledge that individual preference and sensible satisfaction may be a more important factor than the performance data. On this ground, in the present study we constructed the sound sensibility dimensions ('Pleasure', 'Complexity', and 'Activity') and systematically examined the attributes of sound on the sensibility dimensions and analyzed the meanings. As a result, sound sensibility dimensions depended on each sound attributes , and some sound attributes interact with one another. Consequently, the results of the present study will provide the useful possibilities of applying the affective influence in the field of auditory displays needing the applications of the sensibility information according to the sound attributes.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2017.07a
• /
• pp.257-258
• /
• 2017

본 논문에서는 청각 장애인들은 시각에 의존하지 않고는 소리를 인지할 수 없다는 문제를 해결하기 위해 사운드를 시각화하는 웨어러블 시스템을 구현하였다. 시스템의 음성 인식 센서가 음성을 인식해 웨어러블 디스플레이에 전송된 메시지를 확인하고, 기상 재난 메시지를 웨어러블에서 실시간으로 확인하여 안전사고를 예방할 수 있게 하여 청각장애인의 어려움을 해결하였다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2023.07a
• /
• pp.453-454
• /
• 2023

현재 선천적인 청각장애인이나 언어 장애가 있는 사람은 다른 사람과의 대화에 많은 불편을 겪고 있다. 매장을 이용하기 어려움은 물론 언어전달 능력이 떨어지기 때문에 간단한 의사소통을 통한 서로 간의 교류 또한 불편함을 감수해야 한다. 현재는 따로 디스플레이가 내장된 장치를 이용하여 지정된 장소에서 수화를 번역해야 하는 불편함을 해당 문제 해결을 위해 본 연구에서는 딥러닝을 적용하여 수화를 인식하고 번역하여 디스플레이에 텍스트를 출력해주는 시스템을 개발하였다. AI 프레임워크 MediaPipe와 SVM 알고리즘을 라즈베리파이에 적용하여 구현하였다. 개발한 시스템은 제스처에 대한 번역 결과를 제공한다. 기존의 지정된 장소가 아닌 대화가 필요한 모든 장소에서 번역이 가능하도록 개선하여 청각장애인과 언어장애가 있는 사람들과 소통의 불편함을 줄일 수 있을 것으로 기대할 수 있다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.57-62
• /
• 2006

최근 들어 IT 기술의 비약적인 발전과 더불어 사용자의 편의성을 극대화 시키는 웨어러블 컴퓨팅 기술이 주목을 받고 있다. 이러한 기술은 일반인 뿐만 아니라 장애인들에게 큰 도움이 될 것이고, 현재 관련된 연구들이 활발히 진행 중에 있다. 본 논문에서는 청각장애인을 위해 개발된 웨어러블 단말 인터페이스 기술을 소개하고자 한다. 웨어러블 단말장치는 소형 마이크로폰을 통해 입력된 주변의 소리로부터 미리 정해진 주요한 소리를 실시간 감지하여, 시각과 촉각 정보로 변환하여 소리의 종류 및 방향을 청각장애인에 알려주는 기능을 한다. 시각정보는 안경식 소형 디스플레이를 통해 상황에 맞는 그래픽아이콘을 보여주고 동시에 소형 진동자들이 부착된 햅틱 슈트를 통해 촉각 정보가 전달된다. 본 연구에서 개발한 웨어러블 단말장치를 통해 청각장애인이 일상생활에서 발생되는 여러 가지 위험상황 또는 긴급상황에 적절하게 대처할 수 있도록 도와주고자 한다.

• Information Display
• /
• v.4 no.4
• /
• pp.11-13
• /
• 2003

양방향 TV 시대에는 해상도 뿐만 아니라 사운드의 다양화 및 고음질화 되어 시각과 청각 특성 모두가 현장감, 박진감에 버금하는 시스템으로 변경되는 홈시어터 경향으로 더불어 오락 경기도 PC Game에서 Video Game의 위주로 전환 싯점에서는 사운드의 현장감은 더욱 더 절실히 요구되므로, 마이크폰닉에 대한 CRT의 특성 보완이 절실히 요구된다. 따라서, 본 보고서는 열적 변형과 좌굴에 의한 구조물의 안정성을 확보하기 위해서 Invar와 AK의 복합인 Claded Steel에 대한 좋은 특성을 소개하고자 한다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.463-466
• /
• 2006

최근 전자기기에서 시각 및 청각과 함께 촉각 디스플레이가 정보를 출력하는 중요한 수단으로 부각되고 있다. 본 논문에서는 촉각 정보 출력을 위한 소형진동촉각(vibrotactile) 디스플레이 모듈을 개발하였다. 개발한 모듈은 주파수와 진폭을 독립적으로 조절할 수 있으며 핀이 직접 피부에 자극을 주기 때문에 몸체 전체가 떨리는 기존의 진동모터보다 정밀하고 다양한 촉각 표현을 할 수 있다. 또한 고전압을 이용하는 Piezo 방식과 달리 낮은 전력으로 동작이 가능하여 휴대장치에 직접 장착할 수 있는 장점을 가지고 있다.

• Journal of Korea Multimedia Society
• /
• v.12 no.5
• /
• pp.708-716
• /
• 2009

Applications which are implemented on Table Top Display are controlled by hands, so that they support an intuitive interface to users. Users feel the real sense when they interact on the virtual scene in Table Top Display. However, most of conventional augmented reality applications on Table Top Display satisfy only visual sense. In this paper, we propose an interface that supports multi-modal sense in that tactile sense is utilized for augment reality by vibrating a physical control unit when it collides to virtual objects. Users can feel the collision in addition to visual scene. The proposed system facilitates tactile augmented reality through an air hockey game. A physical control unit vibrates when it receives virtual collision data over wireless communication. Since the use of tabletop display environment is extended with a tactile sense based physical unit other than hand, it provides a more intuitive interface.

• Journal of rehabilitation welfare engineering & assistive technology
• /
• v.4 no.1
• /
• pp.63-70
• /
• 2010

Research and development of Assistive Technology (AT) for blind people is primarily focused on assisting mobility and improving access to information. Some particularly useful devices for aiding access to information and communication are DAISY players used with talking books, screen readers for reading screens, video magnifiers to aid low vision, Braille displays, and Braille PDAs. These essential devices have been successfully commercialized and have assisted many visually impaired people. Assistive technology devices for visually impaired people are called sensory substitution devices, because these devices substitute tactile or auditory functions for visual functions. The tactile interfaces of sensory substitution devices such as Braille displays and Braille PDAs have a bimorph type of piezoelectric actuator that forms a Braille (pin) of the Braille cells by moving up and down. KGS Corporation of Japan has more than 80% share of the worldwide market for these Braille cell actuators. Commercializing it for the first time in the world. This paper reviews the various endeavors in Japan in the research and development of tactile displays, such as Braille displays and Braille PDAs. Furthermore, it discusses sensory substitution devices that use tactile displays, focusing especially on the rotating Braille display we have developed.