• The Journal of the Korea institute of electronic communication sciences
• /
• v.10 no.2
• /
• pp.233-238
• /
• 2015

In this paper, we proposed that immersive audio effect method using the effective noise to improve engagement in free-viewpoint TV(FTV) service. In the basketball court, we monitored the frequency spectrums by acquiring continuous audio data of players and referee using shotgun and wireless microphone. By analyzing this spectrum, in case that users zoomed in, we determined whether it is effective frequency or not. Therefore when users using FTV service zoom in toward the object, it is proposed that we need to utilize unnecessary noise instead of removing that. it will be able to be useful for an immersive audio implementation of FTV.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2014.06a
• /
• pp.50-52
• /
• 2014

본 논문에서는 여러 대의 스마트폰을 이용한 입체 음향 시스템에 대하여 제안한다. 기존의 스마트폰을 이용한 입체음향 시스템은 같은 음원을 여러 기기에서 재생하는 방식이기 때문에 품질 높은 입체감을 제공하기 어렵다. 이를 해결하기 위하여 본 논문에서는 기기 별로 서로 다른 음원을 재생하는 방법을 제안한다. 또한, 패닝 기법을 사용하여 가상 음원을 생성하는 방법을 제안한다. 제안한 방법을 사용하면 기존의 방법보다 우수한 입체감을 제공할 수 있으며, 청취자의 설정에 따라 자유롭게 새로운 느낌의 음악을 재생할 수 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.11a
• /
• pp.128-130
• /
• 2018

이 논문은 3D 입체 음향에 대한 좌표 취득 및 표출 방법을 제안한다. 3차원 좌표를 추정하기 위해 다시점 영상의 색상 영상을 통해 중간 시점의 깊이 영상을 생성한다. 깊이 영상 내에서 객체에 대한 이미지 좌표와 깊이 정보를 이용하여 3차원 좌표를 취득한다. 실험 결과를 통해 깊이 영상에서 도출된 객체의 좌표를 음원의 좌표로 설정하여 3D 입체 음향 표출의 효율을 높일 수 있음을 확인한다.

• Proceedings of the Acoustical Society of Korea Conference
• /
• 1998.06c
• /
• pp.269-272
• /
• 1998

본 논문에서는 스테레오 스피커를 통해 입체 음향을 재생할 때 발생하는 크로스 토크(corss talk)를 제거하기 위한 트랜스오럴 필터를 실시간으로 구현하였다. 실시간 처리를 위하여 일반적인 트랜스오럴 필터를 재구성하였으며, 범용 DSP(Digital Signal Processor) 칩인 TMS320C40을 사용하였다. 메인 프로그램은 C-언어를 이용하여 작성하였으며, 빠른 연산을 필요로 하는 컨벌루션 함수는 어셈블러 언어를 이용하여 최적화 하였다. 구현된 트랜스오럴 필터의 평가를 위해서 더미 헤드를 이용하여 녹음된 binaural 신호와 DSP를 이용하여 실시간으로 합성된 binaural 신호를 스테레오 스피커를 통해 재생하여 청취 실험하였다. 청취 실험한 결과 머리 밖에서 음상 정위가 이루어지고 공간감과 거리감은 헤드폰으로 청취할 때 보다 우수하게 나타났다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06d
• /
• pp.121-123
• /
• 2006

초고속 네트워크가 점점 일반화됨에 따라 네트워크를 기반으로 하는 멀티미디어 서비스에 대한 요구도 점점 확대되고 있으며, 동시에 보다 실감 멀티미디어 데이터에 대한 기대 역시 커지고 있다. 입체음향 기술은 음향 부분의 실감성을 향상시키는 방법으로, 네트워크 참여자들의 가상현실 환경 공유 상황에서 체감 품질을 보다 더 향상시키는 역할을 할 수 있다. 본 논문에서는 입체음향 기능들을 네트워크를 통해 전달하고 활용하는데 필요한 요소에 대해 논의하고 그 처리 방법을 제시한다. 아울러 제시한 방법을 적용할 수 있는 활용 분야에 대해서 다룬다.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2000.04a
• /
• pp.76-80
• /
• 2000

본 논문은 입체 음상 정위 시스템에 있어서 청취자의 머리 크기와 음상 정위를 원하는 위치와의 거리에 따른 머리전달함수 (HRTF; Head Related Transfer Function)의 보정 방법에 관한 것이다. 제안된 방법은 먼저 표준 반경에서 표준 머리 크기의 더미 헤드를 이용해 측정된 표준 머리전달함수 데이터베이스로부터 실제의 왼쪽 또는 오른쪽 귀를 기준으로 한 방위각과 고도각을 산출한다. 이렇게 산출된 방위각과 고도각을 기준으로 머리전달함수 데이터베이스의 인덱스를 보정한다. 음상 정위하고자 하는 3차원 공간상의 위치를 입력받게 되면, 입력받은 위치로부터 청취자의 왼쪽 또는 오른쪽 귀를 기준으로 한 방위각과 고도각을 산출한 후에 보정된 머리전달함수 데이터베이스로부터 머리전달함수를 가져와서 입력 모노 신호를 보정된 머리전달함수와 콘볼루션하여 입체음향을 생성하게 된다.제안된 방법에 의해 청취자의 머리 크기 및 거리에 따라 보정된 머리전달함수를 사용함으로써 청취자에게 보다 실감나는 3차원 음상 정위 효과를 제공할 수 있다.

• Journal of Navigation and Port Research
• /
• v.27 no.2
• /
• pp.145-153
• /
• 2003

The presence-feeling enhancement method of a Virtual Reality (VR) simulator is proposed in this paper. The method is to increase realistic human feeling by mutual synergy effect between stereoscopic image and three-dimensional (3D) sound. In order to test the influence of mutual synergy effect, subject assessment with five university students is carried out using VR ship simulator having PC monitor and LCD shutter glasses. It I found that the averaged scale value of image naturalness is increased by 0.5 from $I_{nat}$=3.1 to 3.6 when blending stereoscopic images with 3D sound, and the averaged score value of sound localization is increased by 10% from $A_{SL}$ = 70~75% to $A_{SL}$ = 80~85% when blending 3D sound with stereoscopic image. In conclusion, the results show that the proposed method is able to increase the presence feeling in the VR simulator.

• Journal of Korea Multimedia Society
• /
• v.8 no.11
• /
• pp.1421-1431
• /
• 2005

There are two methods in 3-D sound reproduction: a surround system, like 3.1 channel method and a binaural system using 2-channel method. The binaural system utilizes the sound localization principle of a human using two ears. Generally, a crosstalk between each channel of 2-channel loudspeaker system should be canceled to produce a natural 3-D sound. To solve this problem, it is necessary to trace a head movement. In this paper, we propose a new algorithm to correctly trace the head movement of a listener. The Proposed algorithm is based on the detection of face and eye. The face detection uses the intensity of an image and the position of eyes is detected by a mathematical morphology. When the head of the listener moves, length of borderline between face area and eyes may change. We use this information to the tracking of head movement. A computer simulation results show That head movement is effectively estimated within +10 margin of error using the proposed algorithm.

• Journal of Broadcast Engineering
• /
• v.16 no.5
• /
• pp.846-860
• /
• 2011

The binaural auditory system of human has ability to differentiate the direction and the distance of the sound sources by using the information which are inter-aural intensity difference(IID), inter-aural time difference(ITD) and/or the spectral shape difference(SSD). These information is generated from the acoustical transfer of a sound source to pinna, the outer ears. We can create a virtual sound system using the information which is called Head related transfer function(HRTF). However the performance of 3D sound is not always satisfactory because of non-individual characteristics of the HRTF. In this paper, we propose the algorithm that uses human's auditory characteristics for accurate perception. To achieve this, excitation energy of HRTF, global masking threshold and loudness are applied to the proposed algorithm. Informal listening test shows that the proposed method improves the sound localization characteristics much better than conventional methods.

• The Journal of the Acoustical Society of Korea
• /
• v.24 no.2
• /
• pp.68-77
• /
• 2005

The purpose of a spatial audio system is to give a listener an impression as if he were present in a recorded environment when its sound is reproduced. For this purpose a dummy head microphone is generally used. Because of its human-like shape, dummy head microphone can reproduce spatial images through headphone reproduction. However, its shape and size are restriction to public use and it is difficult to convert the output signal of dummy head microphone into a multi-channel signal for multi-channel environment. So, in this paper, we propose a multi-channel 3D microphone technology. The multi-channel 3D microphone acquire a spatial audio using five microphones around a horizontal plane of a rigid sphere and through post processing, it can reproduce various reproduction signals for headphone, stereo, stereo dipole, 4ch and 5ch reproduction environments. Because of complex computation, we implemented H/W based post processing system. To verily the Performance of the multi-channel 3D microphone, localization experiments were Performed. The result shows that a front/back confusion, which is the one of common limitations of conventional dummy head technology, can be reduced dramatically.