• The Journal of the Korea Contents Association
• /
• v.10 no.8
• /
• pp.130-137
• /
• 2010

An advancement and wide use of portable multimedia devices make it easy to spread digital sound source, enabling users to use portable multimedia devices and search and enjoy digital sound sources and related contents. In opposition the off-line musical service market with CD stagnates gradually and in the crisis where the off-line musical service market vanishes away. In this paper, we propose the mobile music album information retrieval system which combines the barcode and a cellular phone musical service. To get digital sound sources and related information from music albums, the proposed retrieval system uses one-dimensional barcodes attached to music albums and obtains information on related albums from the sound source servers. Also, to reflect user preferences in search results, the system uses search frequency by music album, and searches albums in music genres selected by users in the order of the recent preference. The proposed mobile music album retrieval system is implemented on the basis of WIPI, and is now providing pilot services.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2003.11a
• /
• pp.215-218
• /
• 2003

본 논문에서는 MPEG-7에 정의된 오디오 서술자를 이용한 오디오 특징을 기반으로 한 음악 검색 알고리즘을 제안한다. 특히 timbral 특징들은 음색 구분을 용이하게 할 수 있어 음악 검색뿐만 아니라 음악 장르 분류 또는 Query by humming에 이용 될 수 있다. 이러한 연구를 통하여 오디오 신호의 대표적인 특성을 표현 할 수 있는 특징벡터를 구성 할 수 있다면 추후에 멀티모달 시스템을 이용한 검색 알고리즘에도 오디오 특징으로 이용 될 수 있을 것이다 본 논문에서는 방송 시스템에 적용 할 수 있도록 검색 범위를 특정 컨텐츠의 O.S.T 앨범으로 제한하였다. 즉, 사용자가 임의로 선택한 부분적인 오디오 클립만을 이용하여 그 컨텐츠 전체의 O.S.T 앨범 내에서 음악을 검색할 수 있도록 하였다. 오디오 특징벡터를 구성하기 위한 MPEG-7 오디오 서술자의 조합 방법을 제안하고 distance 또는 ratio 계산 방식을 통해 성능 향상을 추구하였다. 또한 reference 음악의 템플릿 구성 방식의 변화를 통해 성능 향상을 추구하였다. Classifier로 k-NN 방식을 사용하여 성능 평가를 수행한 결과 timbral spectral feature들의 비율을 이용한 IFCR(Intra-Feature Component Ratio) 방식이 Euclidean distance 방식보다 우수한 성능을 보였다.

• Journal of Broadcast Engineering
• /
• v.9 no.1
• /
• pp.2-7
• /
• 2004

In this paper, we proposed the content-based music information retrieval technique using some MPEG-7 low-level descriptors. Especially, pitch information and timbral features can be applied in music genre classification, music retrieval, or QBH(Query By Humming) because these can be modeling the stochasticpattern or timbral information of music signal. In this work, we restricted the music domain as O.S.T of movie or soap opera to apply broadcasting system. That is, the user can retrievalthe information of the unknown music using only an audio clip with a few seconds extracted from video content when background music sound greeted user's ear. We proposed the audio feature set organized by MPEG-7 descriptors and distance function by vector distance or ratio computation. Thus, we observed that the feature set organized by pitch information is superior to timbral spectral feature set and IFCR(Intra-Feature Component Ratio) is better than ED(Euclidean Distance) as a vector distance function. To evaluate music recognition, k-NN is used as a classifier

• Proceedings of the Acoustical Society of Korea Conference
• /
• autumn
• /
• pp.299-302
• /
• 2004

본 논문에서는 내용 기반 음악 정보 검색에 음악의 temporal 특징을 이용한 검색 방법을 제안한다. 방송환경에 적용하기 위해 검색 범위를 드라마나 영화의 배경 음악으로 사용되는 OST 앨범으로 제한하였다. 오디오의 특징 벡터로써 UFCC(Mel Frequency Cepstral Coefficient)를 사용하였으며 이 특징 벡터를 이용하여 VQ(Vector Quantization)로 부호화한 codeword로 오디오 신호의 시변 특성을 표현한다. 본 논문에서는 제안한 음악의 temporal 특성을 반영한 codeword-sequence를 이용하는 방법을 pitch-histogram을 기반으로 하는 방법 및 MFCC codeword-histogram을 기반으로 하는 방법과 비교하고 성능 개선을 보여주었다.

• Journal of the Korean Institute of Intelligent Systems
• /
• v.21 no.5
• /
• pp.637-644
• /
• 2011

Being digitalized, the music can be easily purchased and delivered to the users. However, there is still some difficulty to find the music which fits to someone's taste using traditional music information search based on musician, genre, tittle, album title and so on. In order to reduce the difficulty, the contents-based or the emotion-based music retrieval has been proposed and developed. In this paper, we propose new method to determine the importance of MPEG-7 low-level audio descriptors which are multi-dimensional vectors for the emotion-based music retrieval. We measured the mutual similarities of musics which represent a pair of emotions expressed by opposite meaning in terms of each multi-dimensional descriptor. Then rough approximation, and inter- and intra similarity ratio from the similarity relation are used for determining the importance of a descriptor, respectively. The set of weights based on the importance decides the aggregated similarity measure, by which emotion-based music retrieval can be achieved. The proposed method shows better result than previous method in terms of the average number of satisfactory musics in the experiment emotion-based retrieval based on content-based search.

• Proceedings of the Korean Information Science Society Conference
• /
• 2007.10c
• /
• pp.267-271
• /
• 2007

디지털 카메라의 보급과 U.C.C. 개념의 등장으로 인하여 개인이 생산하는 사진의 양도 많아지고, 이를 감상하는 시간도 많아졌다. 사진이란 추억을 회상하는데 하나의 포인트 역할을 하는 매체이다. 따라서 인간의 감성적인 부분을 많이 자극되는데, 이 과정에서 추가적인 자극을 줌으로써 사용자의 감성을 더욱 자극할 수 있다. 하지만, 기존의 연구들은 디지털 사진을 검색하고 관리하는데 초점이 맞추어져 있었다. 본 논문에서는 사용자가 사진 앨범을 감상할 때에 개별 사진을 분석하여 전체 사진과 가장 잘 어울리는 배경음악을 추천/재생하는 ListenPhoto 시스템을 제안한다. 그리고, 시스템의 필요성에 대한 평가와 시스템 성능에 대한 평가 두 부분으로 나누어 평가를 진행하였다. 사용자들은 이 시스템을 통하여 풍부하게 디지털 사진 생활을 즐길 수 있게 될 것이다.