• 문화기술의 융합
• /
• 제2권2호
• /
• pp.23-27
• /
• 2016

색청은 성장기에 프루닝이 정상적으로 이루어지지 않아서 시각이나 청각 경로에 혼선이 생긴 사람들에게 발생한다. 그들이 겪는 현상을 '색청'이라고 부른다 색청은 소리를 들을 때 색을 보는 형상을 말한다. 영상의 인터뷰에서 예술분야 전문가는 천부적인 재능으로 보았으며, 의학 분야 전문가는 일상생활에 큰 혼란을 야기하는 장애가 될 수 있다고 말한다. 일반적으로 사람들은 무의식적으로 공감각현상을 겪고 있다. 본 논문에서는 영상의 결과물을 바탕으로 과학적으로 증명된 연구결과와 일상 속의 현상을 바탕으로 '색청'을 분석하고, 또한 편집자의 관점에서 영상을 분석한다.

• 한국콘텐츠학회논문지
• /
• 제15권12호
• /
• pp.8-17
• /
• 2015

본 논문은 공감각의 한 부분인 색청(colored-hearing) 공감각을 이용한 사운드-컬러 신호 변환에 관한 연구로서, 인간이 인지 할 수 있는 오감 중 공감각적 변환이 가장 많이 일어나는 청각과 시각을 이용한 실시간 변환 시스템의 구축을 목표로 한다. 본 논문에서 제안하는 음-색 실시간 변환 방법으로서, 입력으로 사용하는 MIDI(Musical Instrument Digital Interface) 신호에서 음계(scale), 옥타브(octave) 및 음의 세기(velocity)를 추출한 후 HSI 컬러모델의 기본 요소인 색상(hue), 명도(intensity) 및 채도(saturation)에 각각 대응하여 변환하는 방법으로 단순하지만 직관적인 방법을 사용한다. 변환된 HSI 컬러 모델은 모니터 출력을 위해 RGB 컬러 모델로 최종 변환하여 출력한다. 실험에서, MIDI 입력신호 전송 H/W 시스템과 VC++ 기반 해당 사운드-컬러 변환 입 출력 S/W 모니터링 시스템을 구축하여 사운드에서 컬러로의 출력이 제안한 방식에 따라 값이 출력됨을 확인하였다.

• 디지털산업정보학회논문지
• /
• 제8권2호
• /
• pp.49-58
• /
• 2012

This paper is on an improved orthogonal projection method which can cancel the acoustic feedback signals in the digital hearing aids. Comparing with the NLMS algorithm which is widely used for simplicity and stability, it shows that this method has the improvement of the convergence performances, and has small computational quantities, for signals with the large auto-correlation as speech signals. This uses the improved orthogonal projection algorithm which reduces the correlation of signals. To verify the convergence characteristics of the proposed algorithm, we simulated about various input signals. The acoustic feedback canceller has a 12-bit resolution with 64-tap adaptive FIR filter. And we compared the results of simulation for this algorithm with the ones for the NLMS algorithm. By these works, it is proved that the feedback canceller adopting the proposed algorithm shows about 3.5dB more high SNR than the NLMS algorithm in the colored input signals.

• 한국멀티미디어학회논문지
• /
• 제8권6호
• /
• pp.768-775
• /
• 2005

For sign languages are main communication means among hearing-impaired people, there are communication difficulties between speaking-oriented people and sign-language-oriented people. Automated sign-language recognition may resolve these communication problems. In sign languages, finger spelling is used to spell names and words that are not listed in the dictionary. There have been research activities for gesture and posture recognition using glove-based devices. However, these devices are often expensive, cumbersome, and inadequate for recognizing elaborate finger spelling. Use of colored patches or gloves also cause uneasiness. In this paper, a vision-based finger spelling recognition system is introduced. In our method, captured hand region images were separated from the background using a skin detection algorithm assuming that there are no skin-colored objects in the background. Then, hand postures were recognized using a two-dimensional grid analysis method. Our recognition system is not sensitive to the size or the rotation of the input posture images. By optimizing the weights of the posture features using a genetic algorithm, our system achieved high accuracy that matches other systems using devices or colored gloves. We applied our posture recognition system for detecting Korean Sign Language, achieving better than $93\%$ accuracy.

• 한국컴퓨터정보학회논문지
• /
• 제13권2호
• /
• pp.135-141
• /
• 2008

본 논문에서는 공유 비전과 특수한 청각에 의해 감지되는 인간의 공감각 특징을 구별하는 색청 인식을 제안한다. 카메라를 통한 시각적인 분석이 인간의 구조화된 사물 인식에 영향을 주는 것이 가능하다는 점이다. 그래서 시각장애인들이 실제 사물과 유사한 비전을 느낄 수 있도록 하는 방법에 대해 연구해왔다. 우선 특정 장면을 대표하는 영상 데이터에서 객체의 경계가 추출된다. 다음으로, 이미지에서 객체의 위치, 색상 평균 감성, 각 객체의 거리 정보, 그리고 객체 영역의 범위와 같은 4가지 특징을 추출하고, 이들 특징들을 청각적 요소로 사상한다. 청각적 요소는 시각장애인을 위한 시각 인식 형태로 제공된다. 제안된 색청 변환 시스템은 보다 빠르고 세부적인 인지 정보를 제공하고 동시에 감각을 위한 정보를 제공한다. 따라서 이 개념을 시각장애인의 영상 인식에 적용할 경우보다 좋은 결과를 얻을 수 있다.

• 한국정보통신학회논문지
• /
• 제12권5호
• /
• pp.887-892
• /
• 2008

최근 고령화 사회로 접어들면서 보청기의 수요가 점차 증대되고 있으며, 이에 따라 우수한 성능의 음향궤환제거기가 요구되고 있다. 본 논문에서는 음향궤환제거기의 수렴 특성을 향상시키기 위한 새로운 적응 알고리즘을 제안하였다. 이 알고리즘은 음성신호와 같이 상관도가 높은 신호를 사용하여 적응필터의 계수를 갱신할 때 신호의 상관도를 감소시켜주기 위해 비상관기를 사용함으로서 수렴성능을 향상시킨다. 본 연구에서 제한 음향궤환제거기의 성능을 검증하기 위하여 시뮬레이션 프로그램을 작성하고 시뮬레이션을 수행하였다. 입력신호의 종류와 적응 알고리즘에 따라서 궤환제거기의 수렴특성을 관찰하였다. 시뮬레이션 결과, 제안한 궤환제거기는 유색신호를 입력으로 사용하는 경우, 약 5-10 dB의 SNR 성능이 개선되는 것을 보여 주었다.

• 한국콘텐츠학회논문지
• /
• 제16권8호
• /
• pp.484-492
• /
• 2016

영상에서 음악의 역할은 영상의 내러티브를 표현하는 보조적인 기능 또는 음악의 주체가 되어 영상을 주도하는 독립적인 기능으로 구분할 수 있다. 소리를 청각으로 감지하여, 이를 시각화하는 작업을 비쥬얼 뮤직이라고 한다. 19세기 이후 예술가들에 의해 색청(色聽)을 통한 음악의 이미지 동기화 시도는 작품을 통해 끊임없이 이루어져 왔다. 또한 20세기 들어 영화의 발전으로 많은 예술가들은 3차원적인 표현의 한계에서 벗어나 움직임의 시간적 개념을 시도할 수 있게 되었다. 이러한 과정 속에서 실험정신이 강한 예술가들은 소리와 영상의 상관관계를 추론하여 비쥬얼 뮤직이라는 새로운 장르를 개척했다. 그 결과 과거 듣는 음악의 시대에서 현재 보는 음악의 시대로 바뀌고 있으며, 음악과 영상의 실험적인 시도로 다양한 작품들이 제작되고 있다. 본 논문은 현대의 비쥬얼 뮤직의 미학적 특징을 살펴본 후, 색을 활용한 비쥬얼 뮤직이 영화, 애니메이션, 뮤직비디오, 미디어 아트 등 다양한 분야에서 어떻게 활용되고 있는지를 비교, 분석하고자 한다.