DOI QR코드

DOI QR Code

가상 콘서트홀 기반의 인터랙티브 음향 체험 인터페이스

Interactive sound experience interface based on virtual concert hall

  • 조혜승 (광운대학교 전파공학과) ;
  • 김형국 (광운대학교 전파공학과)
  • 투고 : 2016.11.28
  • 심사 : 2017.03.29
  • 발행 : 2017.03.31

초록

본 논문에서는 가상 콘서트홀에서 사용자가 인터랙티브한 음향 체험을 할 수 있는 인터페이스에 대해 제안한다. 제안하는 인터페이스는 가상 콘서트홀을 기반으로 좌석 위치별 음향 체험 시스템과 악기 제어 및 음향 체험 시스템으로 구성된다. 제안하는 인터페이스의 각 시스템을 구현하기 위해 인공 잔향 알고리즘과 멀티채널 음원 분리, 머리전달함수를 적용하였다. 제안하는 인터페이스는 유니티(Unity)를 사용하여 구현되었으며 사용자는 가상현실기기인 오큘러스 리프트(Oculus Rift)를 통해 가상 콘서트홀을 체험할 수 있고 립 모션(Leap Motion)을 통해 별도의 입력 도구없이 손동작만으로 시스템을 제어할 수 있으며 헤드폰을 통해 시스템이 제공하는 음향을 체험할 수 있다.

In this paper, we propose an interface for interactive sound experience in the virtual concert hall. The proposed interface consists of two systems, called 'virtual acoustic position' and 'virtual active listening'. To provide these systems, we applied an artificial reverberation algorithm, multi-channel source separation and head-related transfer function. The proposed interface was implemented by using Unity. The interface provides the virtual concert hall to user through Oculus Rift, one of the virtual reality headsets. Moreover, we used Leap Motion as a control device to allow a user experience the system with free-hand. And user can experience the sound of the system through headphones.

키워드

참고문헌

  1. J. Patynen, A virtual symphony orchestra a for studies on concert hall acoustics, (Ph.D. thesis, Aalto University School of Science, 2011).
  2. T. Pratzlich, R. Bittner, A. Litukus, and M. Muller, "Kernel additive modeling for interference reduction in multi-channel music recordings," in Proc. IEEE ICASSP, 584-588 (2015).
  3. M. R. Schroeder, "Digital simulation of sound transmission in reverberant spaces," J. Acoust. Soc. Am. 47, 424-431, (1970). https://doi.org/10.1121/1.1911541
  4. J. Dattorro, "Effect design - part 1: reverberator and other filters," J. Audio Eng. Soc. 45, 660-684, (1997).
  5. E.Vincent, R. Griboncal, and C. F'evotte, "Performance measurement in blind audio source separation," IEEE Trans. Audio, Speech, Language Process. 14, 1462-1469 (2006). https://doi.org/10.1109/TSA.2005.858005
  6. Y. Ephraim and D. Malah, "Speech enhancement using a minimum mean-square error log-spectral amplitude estimator," IEEE Trans. Acoust. Speech Signal Process. 33, 443-445 (1985). https://doi.org/10.1109/TASSP.1985.1164550