• Science of Emotion and Sensibility
• /
• v.9 no.1
• /
• pp.9-17
• /
• 2006

As is commonly said, music is 'language of emotions.' It is because sound is a plentiful modality to communicate the human sensibility information. However, most researches of auditory displays were focused on improving efficiency on user's performance data such as performance time and accuracy. Recently, many of researchers in auditory displays acknowledge that individual preference and sensible satisfaction may be a more important factor than the performance data. On this ground, in the present study we constructed the sound sensibility dimensions ('Pleasure', 'Complexity', and 'Activity') and systematically examined the attributes of sound on the sensibility dimensions and analyzed the meanings. As a result, sound sensibility dimensions depended on each sound attributes , and some sound attributes interact with one another. Consequently, the results of the present study will provide the useful possibilities of applying the affective influence in the field of auditory displays needing the applications of the sensibility information according to the sound attributes.

• Journal of Digital Contents Society
• /
• v.6 no.4
• /
• pp.217-222
• /
• 2005

The purpose of this study is to design and implement a sign language dictionary for the deaf to understand information communication terminologies. When the deafs who have difficulties in communication use the internet, they an get help from this dictionary in accessing various types of information and expressing their intension. In order for the deaf to utilize the internet as efficiently as ordinary people, they must understand information communication terminologies first In order to implement the dictionary, we defined the concepts of the deaf and examined their characteristics. In addition, we established principles in designing this dictionary and selected some terminologies. When explaining the terminologies. we tried to use expressions common to the deaf, but sometimes modified them to keep the original meanings of the terms in producing sign language videos. This studies are applied as learning aid to information education for the deaf, and the deaf's understanding of ICT was measured through two tests.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 1999.03a
• /
• pp.285-289
• /
• 1999

본 논문에서는 고차 뇌 정보처리연구의 일환으로서, 통신 및 정보이론 분야에서 신호간의 확률적 상관성을 나타내는 지표로 많이 활용되는 상호정보(mutual information)를 이용하여 청각자극을 받은 뇌파의 정보이동(information flow)을 분석하였다. 청각자극에 따른 뇌파의 정보이동을 분석한 결과, 자극에 따른 각 상태에서의 확률적 관계의 흐름에 차이가 있음을 볼 수 있었다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.465-468
• /
• 2020

인터넷 미디어, OTT, VOD 등 신규미디어가 비장애인의 정보제공 매체로 널리 확대되나, 자막 서비스를 제공하지 않아 청각장애인의 정보 격차가 더욱 심화되고 있다. 청각장애인의 미디어 접근성 제고를 위해 음성인식 서버 및 스마트 폰·태블릿 앱 간 연계를 통해 음성을 인식하여 자동으로 자막을 생성하고 표시하는 음성-자막 자동 변환 시스템을 개발하였고 음성인식률을 높이기 위해 뉴스/시사/다큐 장르 영상 콘텐츠의 음성에 대해 학습용 데이터를 제작하여 음성인식 성능을 고도화 시켰다. 본 논문에서는 청각장애인을 위한 음성-자막 자동 변환시스템 구성과 음성인식률 비교 평가 결과를 보여준다.

• Proceedings of the Acoustical Society of Korea Conference
• /
• spring
• /
• pp.293-296
• /
• 2002

운동이론(motor theory)에 따르면 조음에 관한 정보는 말소리 지각에 중요한 역할을 한다고 한다. 조음에 관한 시각정보가 자음지각에 중요함을 시사하는 것이 바로 McGurk 효과이다. McGurk 효과는 말소리 지각에서 청각정보와 시각정보가 상충될 때 지각의 결과는 청각에 의한 조음정보와 시각에 의한 조음정보가 통합(integration)되어서 나타나는 것을 말한다. 예컨대, 시각적으로는 /ga/를 발음하는 모습을 보여주면서 동시에 청각적으로는 /ba/를 들려주면 그 결과로 /da/로 지각된다. 마찬가지로 시각적으로는 /ka/를, 청각적으로는 /ma/를 제시하면 /na/로 지각된다. 따라서 McGurk 효과는 시각적인 조음 정보가 자동적으로, 무의식적으로 말소리 지각과정에 통합됨은 보여준다. 한편 이러한 McGurk 효과는 문화마다 그 강도가 다르게 나타난다는 보고가 있다(Sekiyama, 1997). 예컨대, 일본가 중국 원어민의 경우 미국 원어민보다 McGurk 효과가 약하게 나타났다. 본 연구는 한국인에게는 McGurk 효과가 어떠한 양상으로 나타날지를 규명해 보고 아울러 기존의 미국, 일본 그리고 중국 원어민에 대한 연구결과와 비교 분석해 보았다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2022.11a
• /
• pp.968-970
• /
• 2022

일반적으로 가정 내에서 발생하는 안전 사고의 비율은 비장애인에 비해 청각장애인이 높다. 이는 외부인에게 도움을 받을 수 없는 상황에서 청각장애인 스스로 위험상황에 대한 소리를 인지하지 못하기 때문이다[1]. 본 연구에서는 이러한 문제를 해결하기 위해 시각적 효과 또는 진동 신호를 통해 청각장애인들에게 사고 상황 인지를 돕는 시스템을 제안한다. 현재 상용 제품의 경우는 청각장애인이 스마트기기를 소지하고 있을 때만 알림을 인지할 수 있기 때문에 긴급 상황에서 효과가 떨어질 수 있다. 따라서 제안 시스템에서는 어플리케이션 알림과 함께 건물내 전등 색상에 변화를 주는 서비스를 개발하여 스마트 기기를 소지하지 않는 상황에서도 위험상황에 대한 즉각적인 인지를 통해 위험에 대처할 수 있도록 한다. 소리를 시각화하는 것이 본 연구의 핵심 방법론이며 이를 위해 Convolutional Neural Network 모델과 라즈베리파이를 활용하였다.

• Information and Communications Magazine
• /
• v.27 no.9
• /
• pp.30-38
• /
• 2010

본 논문은 인간의 청각기능을 보조하거나 대체할 수 있는 차세대 청각보조장치 및 완전 이식형 인공와우에 관련한 기술동향에 대해서 기술한다. 청각보조장치는 MEMS 마이크로폰과 음장가시화 기술을 기반으로 하여 청각정보를 시각적으로 전달하고자 하는 장치이다. 이를 위해서는 초소형 MEMS 마이크로폰의 최적화 및 실시간 음장가시화 기술 개발이 선행되어야 한다. 차세대 생체모사 인공와우 기술은 기존 인공와우의 단점인 잦은 충전, 장애 노출 등을 극복하고 향상된 음감을 전달할 수 있는 완전 이식형 인공와우로서 그 기술동향을 논하고자 한다.

• Proceedings of the Korean Society of Disaster Information Conference
• /
• 2022.10a
• /
• pp.357-358
• /
• 2022

지진, 호우, 태풍, 화재 등 긴급한 재난 알림 전달이 필요한 상황에서 청각장애인은 소리를 통한 알림을 인지할 수 없으며 문자를 통한 알림의 인지율도 비장애인에 비하여 상대적으로 낮은 편으로서 일반적인 수단의 재난알림을 신속하게 인지하기 어려운 경우가 많다. 이와 같은 청각장애인의 재난안전 긴급알림 인지의 취약성 문제를 해결하고자 픽토그램을 통한 재난안전 긴급 알림 시스템이 개발되었다. 본 연구에서는 재난문자 통보문의 문구를 기반으로 인공지능을 통하여 청각장애인이 인지하기 보다 용이한 일련의 픽토그램으로 자동으로 변환하는 기술을 개발하고자 하였다. 이를 위해 재난안전 관련 긴급 통보문과 관련되는 픽토그램 기반의 콘텐츠를 수집하고 문자 기반의 그림 출력에 적합한 인공신경망 구조와 훈련방법을 구성하여 인공신경망 기반으로 재난문자에 대응되는 픽토그램 기반의 청각장애인 재난안전 긴급알림이 생성될 수 있도록 하였다.

• 한국벤처창업학회:학술대회논문집
• /
• 2016.04a
• /
• pp.154-156
• /
• 2016

이 연구의 목적은 소비자의 구매의도를 자극하고, 판매를 촉진시켜주는 구매시점광고(POP Ad: Point Of Purchase Advertising)의 소매판매 유통점 활용영역에서 정보전달형태 변화에 따른 광고효과 차이가 있는지를 연구하는데 있다. 연구의 배경과 방법은 통상의 구매시점광고가 정보전달 방법에 있어서 소비자 구매활동 장소 내 외에서 단순 비치, 설치된 상태로서 기능과 역할을 수행하고 있음을 착안, 광고소구형태를 시각, 청각 그리고 인적판매원이 관여된 혼합(시각, 청각)형으로 분류하여 정보를 전달 한 후 소비자의 태도 및 매출 비교를 위해 실증적 실험을 했다. 본 연구의 핵심 가설은 '인적판매원이 개입된 혼합형(시각, 청각) 구매시점광고가 소비자 태도(신뢰도/호감도/구매의도) 및 매출( + / -)영향도가 더욱 높게 나타날 것이다'이다. 이는 소비자에게 시각, 청각이 동시에 전달되는 혼합소구유형은 정보전달력이 우수하고, 광고 효과성이 높을 것이다를 검증하기 위한 것이다. 본격 연구 전에 실시한 1차 사전적 실증 실험결과 소비자가 지각하는 관점에 따라 시각형(광고의 정보내용을 인쇄물로 제공), 청각형(광고의 정보내용을 소리전달형태로 제공), 시각, 청각 혼합형(인적판매원이 시각형 정보를 활용 광고내용을 직접 전달)분류한 3가지 유형간 정보전달 효과의 차이는 없는 것으로 나왔다. 하지만, 본 연구는 생계형 소매유통 창업현장에서 활동하고 있는 소상공인들이 구매시점광고를 광고의 활용측면에서 능동형 마케팅 활동 도구로 사용할 수 있는지에 대한 실증적 사례 분석을 했다는 것에 의의를 두고자 한다. 업종별 차이는 있지만 대부분의 소상공인들의 마케팅 환경은 열악하다. 마케팅 전담 인력의 부재, 마케팅 지식의 부족, 전방위적 마케팅 전개 시간의 한계 등으로 인해 체계적으로 마케팅활동을 펼 칠 수 없는게 현실이다. 이에 현장 활용성이 높은 효율적이고 효과적인 구매시점광고의 광고정보전달 연구 및 개발이 요구된다고 보며, 이에 관한 지속적인 후행적 연구와 노력이 필요하다고 사료된다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2019.10a
• /
• pp.338-341
• /
• 2019

본 설계는 청각장애인을 위한 기술이다. 청각장애인은 일상생활에서 음성을 통한 의사소통이 어렵기 때문에, 비장애인과의 정보 격차를 줄이기 위한 '안경 부착형 커뮤니케이션 디바이스'를 개발하였다. Speech-To-Text 기술을 적용하여 음성이 인식되면 텍스트로 변환하여 출력한다. 따라서 음성에 대한 정보를 텍스트로 볼 수 있게끔 구현하였다. 또한 청각장애인은 소리로 파악할 수 있는 위험 요소에 노출되어 있다. 혹시 모를 안전사고에 빠르게 대처하고자 현재 위치 정보를 보호자에게 전송하는 기능을 구현하였다.