DOI QR코드

DOI QR Code

LED조명 시스템을 이용한 음악 감성 시각화에 대한 연구

Emotion-based music visualization using LED lighting control system

  • 투고 : 2017.03.29
  • 심사 : 2017.06.17
  • 발행 : 2017.06.30

초록

본 논문은 음악의 감성을 시각화하는 새로운 방법을 제안하는 논문으로 시각화를 위하여 감성 LED조명 제어 시스템을 고안하였으며 이 시스템은 청중들의 음악 경험을 더욱 풍요롭게 하기 위함에 목적이 있다. 이 시스템은 기존 연구의 음악 감성 분석 알고리즘을 이용하였는데 하나의 음악에서 하나의 감성을 추출하는 기존 연구의 한계를 보완하고자 음악의 1초당 세그먼트에서 감성을 추출 하여 감성 변화를 감지하는 방법을 연구하였다. 또한 LED조명의 감성 컬러는 IRI컬러 모델과 Thayer의 감성 모델을 기초로 새로운 감성 컬러 36가지를 정의 하여 각 감성에 맞는 색으로 연출 할 수 있도록 구성하고 애니메이션과 더불어 감성 LED 조명으로 표현 할 수 있도록 하였다. 이 시스템의 검증을 위한 실험 결과, 듣는이의 감성과 감성 LED 조명 시스템의 감성 일치율이 60% 이상으로 향후 음악 감성 기반 서비스의 중요한 밑거름이 될 것으로 보인다.

This paper proposes a new strategy of emotion-based music visualization. Emotional LED lighting control system is suggested to help audiences enhance the musical experience. In the system, emotion in music is recognized by a proposed algorithm using a dimensional approach. The algorithm used a method of music emotion variation detection to overcome some weaknesses of Thayer's model in detecting emotion in a one-second music segment. In addition, IRI color model is combined with Thayer's model to determine LED light colors corresponding to 36 different music emotions. They are represented on LED lighting control system through colors and animations. The accuracy of music emotion visualization achieved to over 60%.

키워드

참고문헌

  1. Laurier, Cyril, and Perfecto Herrera. "Mood cloud: A real-time music mood visualization tool," Proceedings of the Computer Music Modeling and Retrieval, 2008.
  2. Chen, Chin-Han, Ming-Fang Weng, Shyh-Kang Jeng, and Yung-Yu Chuang, "Emotion-based music visualization using photos," In Advances in Multimedia Modeling, pp. 358-368. Springer Berlin Heidelberg, 2008.
  3. Taylor, Robyn, Pierre Boulanger, and Daniel Torres, "Visualizing emotion in musical performance using a virtual character," In Smart Graphics, pp. 13-24. Springer Berlin Heidelberg, 2005.
  4. Chiang, Wei-Chun, Jeen-Shing Wang, and Yu-Liang Hsu, "A Music Emotion Recognition Algorithm with Hierarchical SVM Based Classifiers," In Computer, Consumer and Control (IS3C), 2014 International Symposium on, pp. 1249-1252. IEEE, 2014.
  5. Pouyanfar, Samira, and Hossein Sameti, "Music emotion recognition using two level classification," In Intelligent Systems (ICIS), 2014 Iranian Conference on, pp. 1-6. IEEE, 2014.
  6. Thayer, Robert E. The biopsychology of mood and arousal. Oxford University Press, 1989.
  7. Russell, James A, "A circumplex model of affect," Journal of personality and social psychology 39, no. 6, 1980.
  8. Kim Donglim, Lim Bin, Lim Younghwan "Music Emotion Control Algorithm based on Sound Emotion Tree," The Journal of the Korea Contents Association, pp. 21-31, 2015.
  9. I.R.I. Adjective Image Scale, http://iricolor.com
  10. I.R.I Image Research Institue Inc, "Best Color Selection for Beautiful Design, Color Combination," YoungJin.com, Seoul Korea, 2003