DOI QR코드

DOI QR Code

퍼지 유사관계를 이용한 다차원 특징들의 가중치 결정과 감성기반 음악검색

The Weight Decision of Multi-dimensional Features using Fuzzy Similarity Relations and Emotion-Based Music Retrieval

  • 임지혜 (전북대학교 컴퓨터공학과) ;
  • 이준환 (전북대학교 컴퓨터공학과)
  • 투고 : 2011.07.15
  • 심사 : 2011.10.15
  • 발행 : 2011.10.25

초록

음원이 디지털화 되면서 쉽게 음악을 구매하고 들을 수 있게 되었다. 하지만 많은 음악 중에서 음악가, 장르, 제목, 앨범 타이틀 등 전통적인 음악 정보를 이용하여 사용자들이 자신의 취향에 맞는 음악을 찾는 데는 여전히 어려움이 있다. 이러한 어려움을 해소하기 위해 내용기반 음악검색과 감성기반 음악검색 방법 등이 제안되고 개발되고 있다. 본 논문에서는 이러한 어려움을 해소하기 위한 감성기반 음악 검색방법에서 다차원 벡터형태의 MPEG-7 저수준 오디오 서술자들의 감성기반 검색에서의 중요도를 결정하기 위한 새로운 방법을 제안하였다. 제안된 방법에서는 상호간에 대립되는 감성을 대표되는 음악들의 유사성을 다차원 서술자 관점에서 측정하고 이 유사관계를 러프 근사화와 군집 내/군집 간의 유사성 비율을 이용하여 서술자의 중요성을 결정한다. 중요성을 바탕으로 결정된 가중치는 여러 개의 오디오 서술자들의 유사성을 총체화하는데 이용되며 이를 활용하여 감성기반 음악검색을 수행한다. 제안된 방법은 내용기반 음악 검색을 기반으로 한 감성기반 음악검색 구조에서 실험한 결과 평균 검색 개수측면에서 기존의 휴리스틱 방법보다 좋은 검색 결과를 나타내었다.

Being digitalized, the music can be easily purchased and delivered to the users. However, there is still some difficulty to find the music which fits to someone's taste using traditional music information search based on musician, genre, tittle, album title and so on. In order to reduce the difficulty, the contents-based or the emotion-based music retrieval has been proposed and developed. In this paper, we propose new method to determine the importance of MPEG-7 low-level audio descriptors which are multi-dimensional vectors for the emotion-based music retrieval. We measured the mutual similarities of musics which represent a pair of emotions expressed by opposite meaning in terms of each multi-dimensional descriptor. Then rough approximation, and inter- and intra similarity ratio from the similarity relation are used for determining the importance of a descriptor, respectively. The set of weights based on the importance decides the aggregated similarity measure, by which emotion-based music retrieval can be achieved. The proposed method shows better result than previous method in terms of the average number of satisfactory musics in the experiment emotion-based retrieval based on content-based search.

키워드

참고문헌

  1. 이상오, 2008년 해외 디지털콘텐츠 시장조사: 디지털음악, 온라인포털, 한국소프트웨어진흥원, 2008.
  2. Y. Zhang, J. Zhou, "A Study On Content-Based Music Classification," Signal Processing and I ts Applications, vol. 2, pp. 113-116, 2003.
  3. E. Wold, T. Blum, D. Keislar, J. Wheaton,"Con tent-Based Classification, Search, and Retrieval of Audio," IEEE Multimedia, vol. 3, no. 3, pp.27-36, 1996. https://doi.org/10.1109/93.556537
  4. 박만수, 박철의, 김회린, 강경옥, "MPEG-7 오디오 하위 서술자를 이용한 음악 검색 방법에 관한 연구," 한국방송공학회, vol. 9, no. 4, pp.215-218, 2003.
  5. 김태연, 송병호, 배상현, "감성기반 음악․이미지 검색 추천 시스템 설계 및 구현," 전자공학회 논문지, vol. 47, no. 1, pp73-79, 2010.
  6. H. G. Kim, J .H. Kim, "Music Similarity Search Based on Music Emotion Classification," The Gournal of the Acoustical Society of Korea, vol. 26, no.3E, pp.69-73, 2007.
  7. Y. H. Yang, C. C. Liu, H. H. Chen, "Music Emotion Classification: A Fuzzy Approach," ACM Multimedia, pp81-84, 2006.
  8. F. Rumsey, MIDI Systems and Control, Focal Press, 1990.
  9. B. Logan, "Music recommendation from song sets," ISMZR. pp.425-428, 2004.
  10. 신송이, 박은종, 엄경배, 이준환, "검색의 일관성원리와 피드백을 이용한 감성기반 음악 검색 시스템," 한국정보처리학회, vol. 17, no.2, pp.99-106, 2010. https://doi.org/10.3745/KIPSTB.2010.17B.2.099
  11. P. Ekman, Emotion in the Human Face ,Cambridge Univ. Press, Cambridge, 1982.
  12. A. Damasio, Descartes' Error: Emotion, Reason, and the Human Brain, New York: A Crosset/Putnam Book, 1994.
  13. K. Oatley, P. N. Johnson-Laird, "Toward a Cognitive Theory of Emotions," Cognition and Emotion. vol. 1, no. 1, pp29-50. 1987. https://doi.org/10.1080/02699938708408362
  14. 신송이, 다중질의 방법을 이용한 감성기반 음악 검색 시스템, 전북대학교 석사학위 졸업논문, 2010.
  15. 오일석, 패턴인식, 교보문고, 2008.
  16. ISO/IEC JTC1/SC29/WG11/N4509 "MPEG-7 Overview (version 10)," Available: http://mpeg.chiariglione.org/standards/mpeg-7/mpeg-7.htm, 2004, [Accessed: July 14, 2011]
  17. Z. Pawlak, "Rough sets," International Journal of Computer and Information Science, vol. 11, no. 5, pp. 341-356, 1982. https://doi.org/10.1007/BF01001956
  18. E. J. Park, J. W. Lee, "Emotion -Based Image Retrieval Using Multiple-Queries and Consistency Feedback," IEEE Industrial Informatics, pp. 1654-1659, 2008.
  19. L. Lu, D. Liu, H. J. Zhang, "Automatic Mood Detection and Tracking of Music Audio Signals," IEEE Audio, Speech, And Language Processing, vol. 14, no. 1, pp. 5-18, 2006. https://doi.org/10.1109/TSA.2005.860344
  20. Z. Pawlak, Rough sets: theoretical aspects of reasoning about data, Kluwer Academic Publishers, 1991.
  21. J. Stepaniuk, "Approximation Spaces in Extensions of Rough Set Theory," Rough Sets and Current Trends in Computing, vol. 1424, pp 290-297, 1998. https://doi.org/10.1007/3-540-69115-4_40
  22. Y. J. Jiang, J. Chen, X. Y. Ruan, "Fuzzy similarity- based rough set method for case-based reasoning and its application in tool selection," International Journal of Machine Tools & Manufacture, vol. 46, no. 2, pp 107-113, 2006. https://doi.org/10.1016/j.ijmachtools.2005.05.003
  23. D. S. Yeung, X. Z. Wang, "Improving Performance of Similarity-Based Clustering by Feature Weight Learning," IEEE Pattern Analysis And Machine Intelligence, vol. 25, no. 4, pp.556-561, 2002
  24. G. J. Klir, B. Yuan, Fuzzy sets and fuzzy logic: theory and application, Prentice-Hall Inc., 1995