• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06d
• /
• pp.121-123
• /
• 2006

초고속 네트워크가 점점 일반화됨에 따라 네트워크를 기반으로 하는 멀티미디어 서비스에 대한 요구도 점점 확대되고 있으며, 동시에 보다 실감 멀티미디어 데이터에 대한 기대 역시 커지고 있다. 입체음향 기술은 음향 부분의 실감성을 향상시키는 방법으로, 네트워크 참여자들의 가상현실 환경 공유 상황에서 체감 품질을 보다 더 향상시키는 역할을 할 수 있다. 본 논문에서는 입체음향 기능들을 네트워크를 통해 전달하고 활용하는데 필요한 요소에 대해 논의하고 그 처리 방법을 제시한다. 아울러 제시한 방법을 적용할 수 있는 활용 분야에 대해서 다룬다.

• 한국HCI학회:학술대회논문집
• /
• 2009.02a
• /
• pp.2073-2075
• /
• 2009

최근 멀티미디어 기술과 가상/증강현실 기술의 발전으로 사용자에게 몰입감 있는 콘텐츠를 제공하는 여러 시스템들이 제안되고 있다. 또한 기존의 시각과 음향효과만으로 이루어진 시스템의 한계를 넘어서 실제와 같은 느낌을 전달할 수 있는 햅틱기술을 적용하여 보다 몰입감있는 체험형 실감책들이 고안되고 있다. 본 연구에서는 과학교과서를 중심으로 과학적 이론을 보다 효과적으로 가르치고 배우기 위해 필요한 다양한 촉감(Haptic)을 분류하고, 이를 실감책에 적용하여 책이 담고 있는 주요 내용 또는 삽화와 관련된 다양한 멀티미디어 콘텐츠를 가상/증강환경에서 시청각정보와 함께 촉각콘텐츠를 독자에게 제공함으로써 보고, 듣고 만질 수 있는 적극적인 촉감 상호작용이 가능한 실감책 ('Sil-Gam' Book) 시스템의 기본 프레임워크를 제시한다.

• Journal of Broadcast Engineering
• /
• v.28 no.2
• /
• pp.213-229
• /
• 2023

In this paper, we introduce a spatial sound rendering system that provides 6DoF spatial sound in real time in response to the movement of a listener located in a virtual environment. This system was implemented using MPEG-I AEP as a development environment for the CfP response of MPEG-I Immersive Audio and consists of an encoder and a renderer including a decoder. The encoder serves to offline encode metadata such as the spatial audio parameters of the virtual space scene included in EIF and the directivity information of the sound source provided in the SOFA file and deliver them to the bitstream. The renderer receives the transmitted bitstream and performs 6DoF spatial sound rendering in real time according to the position of the listener. The main spatial sound processing technologies applied to the rendering system include sound source effect and obstacle effect, and other ones for the system processing include Doppler effect, sound field effect and etc. The results of self-subjective evaluation of the developed system are introduced.

• The Journal of the Korea institute of electronic communication sciences
• /
• v.12 no.6
• /
• pp.1135-1142
• /
• 2017

In this paper, we propose an algorithm that can automatically mix the screen and sound by tracking the change of the sound data according to the screen change so that the real sound can be implemented in the personal broadcasting service. Since the personal broadcasting service is often broadcasted lively, it should be convenient to have a real-time mixing. Through experiments, it was confirmed that the sound pressure changes in a wide range in the high frequency band related to the clarity for understanding according to the rotation angle change of the screen. Regression analysis of the sound pressure changes at 2kHz, 4kHz, and 8kHz, The attenuation change of sound pressure was observed at the slope of -1.17, the slope of -2.0, and the slope of -2.44 for each frequency. Therefore, these experiment results can be applied to the VR service. This study is expected to be useful data in the implementation of personal broadcasting service.

• Electronics and Telecommunications Trends
• /
• v.34 no.3
• /
• pp.13-22
• /
• 2019

Although virtual reality technology may not be deemed as having a satisfactory quality for all users, it tends to incite interest because of the expectation that the technology can allow one to experience something that they may never experience in real life. The most important aspect of this indirect experience is the provision of immersive 3D audio and video, which interacts naturally with every action of the user. The immersive audio faithfully reproduces an acoustic scene in a space corresponding to the position and movement of the listener, and this technology is also called spatial audio. In this paper, we briefly introduce the trend of spatial audio technology in view of acquisition, analysis, reproduction, and the concept of MPEG-I audio standard technology, which is being promoted for spatial audio services.

• Proceedings of the Acoustical Society of Korea Conference
• /
• autumn
• /
• pp.143-146
• /
• 2004

일반적으로, 화상회의에서 화자의 위치를 검출하는 것은 음향 신호를 기반으로 이루어져 왔다. 그러나 물리적인 환경의 제약이나 화자 검출 시스템의 한계를 벗어나는 노이즈가 발생하는 경우에는 검출 시스템의 성능저하를 초래하게 된다. 본 논문에서는 음향 기반의 검출 시스템과 독립적으로, 혹은 상호 보완적으로 사용될 수 있는 영상 기반의 화자 검출 알고리즘에 대하여 제안하고자 한다. 화자의 위치에 관한 정보는 화상회의에 한층 사실감을 부여하는 3 차원 오디오 재생에 사용될 수 있다.

• 한국HCI학회:학술대회논문집
• /
• 2009.02a
• /
• pp.99-104
• /
• 2009

최근 멀티미디어 기술과 가상/증강현실 기술의 발전으로 사용자에게 몰입감 있는 콘텐츠를 제공하는 여러 시스템들이 제안되고 있다. 또한 기존의 시각과 음향효과만으로 이루어진 시스템의 한계를 넘어서 실제와 같은 느낌을 전달할 수 있는 햅틱기술을 적용하여 보다 몰입감있는 체험형 실감책들이 고안되고 있다. 본 논문은 과학교과서를 중심으로 과학적 이론을 보다 효과적으로 가르치고 배우기 위해 필요한 다양한 촉감(Haptic)을 분류하고, 이를 실감책에 적용하여 책이 담고 있는 주요 내용 또는 삽화와 관련된 다양한 멀티미디어 콘텐츠를 가상/증강환경에서 시청각정보와 함께 촉각콘텐츠를 독자에게 제공함으로써 보고, 듣고 만질 수 있는 적극적인 촉감 상호작용이 가능한 실감책 ('Sil-Gam' Book) 시스템의 기본 프레임워크를 제시한다. 제시된 실감책은 크게 세 부분으로 구성된다. 첫째, 실감책을 읽고 있는 사용자의 손가락의 위치, 시선과 같은 사용자의 움직임을 추적하고 책의 크기, 페이지 등을 인식하는 센서가 부착된 센싱 부; 둘째, 장비에 따라 적용 가능한 촉감 속성, 물체의 움직임에 따라 적용할 수 있는 촉감 속성등 다양한 촉감콘텐츠의 속성을 저작하고 편집하는 소프트웨어 부; 마지막으로 사용자에게 저작된 실감 콘텐츠를 사용자가 쉽고 직관적으로 체험하게 하기 위한 디스플레이부로 구성된다. 여기서 디스플레이 부는 세부적으로 시청각 콘텐츠를 전달하는 시청각 디스플레이 부와 역촉감 콘텐츠를 전달하는 역촉감 디스플레이부로 구성된다. 본 논문에서는 또한 실감책 촉감 저작도구를 사용하여 제시할 수 있는 다양한 촉감을 중고등학교 교육과정에서 배우는 과학 이론에 적용하여 과학 실험시 경험할 수 있는 다양한 역/촉감을 전달하는 몇 가지 시나리오를 예시하였다.

• Proceedings of the Acoustical Society of Korea Conference
• /
• autumn
• /
• pp.259-262
• /
• 2001

인간이 실제 생활에서 느끼는 입체음향을 녹음해서 재생기를 통해 듣고자하는 시도는 역사적으로 이미 한 세기가 지났으나 아직도 실감 있는 입체음향 녹음 및 재생기법 연구는 계속진행 중에 있다. 스피커 혹은 헤드폰으로 전후, 좌우, 상하의 모든 방향 및 거리감까지도 재생시킬 수 있는 있어야 진정한 입체음향이라 말할 수 있겠지만 많은 오디오 기기 제조업체들이 홍보효과를 위해 입체음향을 부적절하게 사용함으로써 일반 사용자들은 입체음향에 대해 많이 혼돈하고 있는 실정이다. 정확한 의미로 오늘날 대부분의 오디오 기기를 차지하고 있는 스테레오 사운드는 1차원(좌우 축)사운드라고 말할 수 있으며, 극장 사운드는 2차원(좌우, 전후 축)사운드이며 상용화된 3차원 사운드 제품은 아직 존재하지 않는다고 말할 수 있다 본 논문에서는 현재 연구 중인 "방송을 위한 입체음향 생성 및 재생 기법" 중 대표적인 바이노럴 기법과 Ambisonic 기법 및 문제점에 대해 알아보았다

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2011.05a
• /
• pp.611-614
• /
• 2011

최근 멀티미디어 기술의 발달, 특히 음향 기술의 급격한 발달과 더불어 고품질 오디오에 대한 요구와 함께보다 현실감 있는 오디오를 재생하기 위한 실감 오디오기술 개발이 요구되고 있다. 이러한 요구를 만족시키기 위해 사용자의 가상현실 및 증강현실에서 실감나는 오디오 효과를 제공해 줄 수 있는 3차원 오디오에 대한 연구가 활발히 진행되고 있다. 본 논문에서는 증강현실에서 좀 더 나은 오디오 기술을 적용하여 실감나는 오디오 효과를 제공해 줄 수 있는 방법을 연구하고자 하였다. 연구한 내용은 가상세계와 실제세계의 현실감을 제공하기 위하여 마커 위에 띄워진 3D 모델의 움직임에 따라서 움직임에 맞는 사운드. 즉, 거리, 각도 등의 변화에 따른 사운드의 크기 및 피치 변화를 줄 수 있도록 하였다.

• Electronics and Telecommunications Trends
• /
• v.22 no.5
• /
• pp.12-23
• /
• 2007

유비쿼터스 사회에서는 언제, 어디서나 네트워크에 연결하여 다양한 형태의 실감 정보를 제공 받아 더욱더 풍요로운 삶을 누릴 수 있을 것이다. 이것은 음성인식 및 영상합성 생성기술, 입체 영상/음향 입?출력기술, IT-NT-BT 기술융합의 가속화로 지능형 실감형 정보처리는 물론 휴먼정보 등의 다양한 정보처리가 가능한 유비쿼터스 휴대 단말기에 의해서 실현될 것이다. 휴대 단말기에서 반도체는 약 $40{\sim}50%$의 비중을 차지하는 가장 중요한 부품이며, 다양한 지능형 실감형 정보를 처리하기 위하여 막대한 양의 데이터를 처리할 수 있는 저전력 고성능 반도체 SoC 개발이 필수적이다. 본고에서는 휴대 단말기에 사용되는 SoC 기술 및 재구성형 프로세서 기술 동향을 파악함으로써, 유비쿼터스 단말기에서 필수적으로 사용될 반도체 SoC 기술의 발전 방향에 대해서 전망해 보았다.