• 한국엔터테인먼트산업학회논문지
• /
• 제10권4호
• /
• pp.77-92
• /
• 2016

본 연구는 노먼 맥라렌의 Animated sound 기법이 본격적으로 도입된 구겐하임 시절의 작품인 "Dots" 와 "Loops"의 이미지와 사운드의 관계를 미셸 시옹의 시청각 분석 이론과 지그프리트 크라카우어의 동조성과 비동조성, 평행성과 대위법의 기준을 적용하여 분석적으로 고찰하였다. 두 작품의 분석 결과로서 사운드의 전개에 관한 측면, 추상 애니메이션의 표현적 측면에서 차별된 점도 일부 나타나지만, 주요한 두 가지의 음향적 소재가 주도하고 모노포니한 사운드로 구성되며 음향효과적 소재를 음악적으로 구성, 이미지와 사운드의 관계가 항상 동기화를 이루면서 평행성을 강조하는 점은 두 작품의 공통적 특징이다. 두 작품에서 사운드의 음고는 이미지의 전개 및 모양, 사운드의 음량은 이미지의 크기, 사운드의 음가는 이미지의 시간적 길이 및 이미지의 모양과 밀접하게 관계를 맺고 있다. 이처럼 "Dots"와 "Loops"는 이미지가 사운드로 되고, 사운드가 새로운 이미지와 만나는 과정을 통하여 이미지와 사운드는 서로의 종속 관계가 아닌 대등한 관계로서 분석되었다. 두 작품은 새로운 양식을 예견하듯이 미니멀 아트와 뮤직비디오적 성향을 보여주었고, 오늘날의 애니메이션 제작에 있어서 사운드 제작의 새로운 접근을 일깨워주었다.

• 한국음향학회지
• /
• 제30권3호
• /
• pp.142-148
• /
• 2011

본 연구는 컬러이미지에서 특정 사운드를 연상하는 인간의 공감각적 기능을 모방하는 지능로봇의 개발을 최종 목표로 하고 있으며, 이는 컬러이미지와 사운드의 상호변환에 기초하여 이루어질 수 있다. 최종 목표의 첫 번째 단계로서, 본 연구는 컬러 이미지에서 사운드로의 변환을 이용한 기본 시스템의 구축에 초점을 맞추었다. 본 연구에서는 빛과 소리사이의 물리적 주파수 정보로부터 그 유사성에 기초하여 컬러이미지에서 사운드로 변환하는 방법을 제시한다. 컬러이미지에서 사운드로 변환하는 방법은 RGB-to-HSI 컬러모델 변환을 통한 HSI 히스토그램을 사용하고 Microsoft Visual C++을 이용하여 코딩함으로써 구현되었다. 두 가지 컬러이미지를 사용하여 시뮬레이션 실험을 하였고, 그 결과, 각각의 입력 컬러이미지의 색상(Hue), 채도 (Saturation) 및 명도 (Intensity)를 사운드의 기본주파수 (F0: Fundamental Frequency), 하모닉 (Harmonics) 및 옥타브 (Octave)로 각각 변환한다. 제안된 시스템을 통하여 변환된 사운드 요소들을 Csound를 이용, 합성함으로써 웨이브(wav) 파일 포맷 음원을 최종 생성하였다.

• 만화애니메이션 연구
• /
• 통권20호
• /
• pp.87-104
• /
• 2010

애니메이션은 일반 영화와 마찬가지로 이미지와 사운드가 결합하여 의미와 감동을 만들어낸다. 유리 노르슈테인의 <이야기 속의 이야기>는 다양한 음악과 음향효과가 이미지와 잘 결합했다는 점에서, 애니메이션 사운드 분석의 좋은 사례가 되는 작품이다. 본 연구는 이 작품 속에서 사운드가 어떤 기능을 하면서 의미를 만드는가를 분석하는데 초점을 맞춘다. 일반적으로 사운드는 대사, 음악, 음향효과라는 세 개의 영역으로 나눠지며, 애니메이션은 각 영역에 독특한 미학적 특성이 있다. 대사에 사용되는 목소리는 캐릭터의 이미지에 맞춰 창조되며, 음악에서는 특별히 이미지와 리듬의 결합이 중요하다. 음향효과 면에서도 애니메이션에서는 단순한 소리의 모사가 아닌 움직임의 묘사라는 성격이 강하다. 본 연구는 이 세 가지 영역으로 나눠 사용된 사운드를 분석하되, 청점과 주관적 사운드, 사이음의 개념도 분석을 위해 사용했다. 작품에 사용된 러시아 자장가는 멜로디의 변주와 반복을 통해 전체 내러티브의 모티브로 기능을 한다. 아기와 늑대의 청점을 통한 주관적 사운드의 사용은 작품의 중심을 이루고 있는 캐릭터에 특별한 위상을 부여한다. 음악과 이미지의 반복적 결합, 음향효과의 언어적이고 주석적인 기능, 그리고 비교적 관습적인 음악과 음향사용은 작품의 가독성과 감동을 높여준다는 것들은 이 작품의 전체적 사운드사용의 특징이다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2007년도 추계학술발표대회
• /
• pp.121-123
• /
• 2007

현재까지 유해한 컨텐츠(Contents)를 차단하기 위한 활발한 연구가 있었으나, 사람의 사운드(sound)와 이미지(image)를 통합한 필터링(filtering) 기법에 대한 연구는 활발히 이루어지지 않은 측면이 있다. 본 논문은 이미지(image) 데이터 중 피부색 분포 비율과 사운드(sound) 데이터 중 주파수 분석을 통한 심층적인 기법을 활용하여 현재까지 진행되고 있는 이미지 필터링(image filtering)방법에 대한 수행 결과보다 획기적으로 개선된 성능을 보이고자 한다. 즉, 사운드와 이미지의 특징 정보를 이용한 성인 컨텐츠(Adult Contents)분류 기법을 활용하는 것으로 성인 컨텐츠(Adult Contents)에서 두드러지는 특징을 보이는 사운드 패턴을 분석하여 현재까지 한정된 자원인 이미지만을 활용한 기법보다는 현저한 향상된 수행능력을 예측해 볼 수 있다.

• 디지털융복합연구
• /
• 제14권7호
• /
• pp.331-337
• /
• 2016

본 연구의 목적은 사운드 데이터를 3차원 입체 이미지로 시각화하는 방법을 제공하는 것이다. 사운드 데이터의 시각화는 사운드데이터의 음역채널을 텍스트베이스형태의 스크립트 제작한 후 설정된 알고리즘에 따라 수행한다. 알고리즘은 음역 채널 설정단계, 사운드 시각화용 화면프레임 설정단계, 단위 입체이미지 구현체 특성정보 설정단계, 사운드 데이터 음역 채널 검출단계, 사운드 시각화단계등 총 5단계로 이루어지며, 마우스등의 입력장치로 최소한된 입력신호조작으로 3D 시각화를 수행한다. 일반적인 방법으로 애니메이터가 할 수 없는 양을 가진 사운드 파일을 이용해, 애니메이터가 작업하는 시간과 제시한 연구방법을 이용한 작업시간을 비교하여, 본 연구에서 제시한 3D 시각화 방법이 창의적 예술적 이미지를 제작에 저비용, 고효율 방법임을 부각하였다. 향후, 게임엔진에서 렌더링 과정을 거치지 않는 방법으로 사운드 데이터의 실시간 시각화 방법을 연구할 예정이다.

• 감성과학
• /
• 제15권2호
• /
• pp.231-238
• /
• 2012

본 연구는 하나의 감각으로 인해 다른 영역의 감각을 불러일으키는 공감각 현상을 기초로 하여 사운드에서 컬러이미지를 유추하여 생성하는 응용 시스템의 구현을 최종 목표로 한다. 이를 위해 사운드의 특징정보인 기본주파수(F0, Fundamental Frequency)에서 음계(Scale) 및 옥타브(Octave) 성분을 추출한 후, HSI 컬러모델인 색상(Hue), 명도(Intensity) 성분에 각각 매핑한다. 본 논문에서 채도(saturation)값은 고정된 값을 사용한다. 이를 다시 RGB 컬러모델로 변환한 후 최종 BMP 포맷으로 컬러 이미지를 출력한다. 본 연구에서 제시한 사운드-컬러이미지 변환 방법을 토대로 기본 변환 시스템을 구현해 본 결과, 기본주파수에서 추출된 음계 및 옥타브 성분의 변화에 따라 색상 및 명도가 상이한 다양한 컬러가 나오는 것을 확인할 수 있었다. 또한 하드웨어적 구현을 위해 TMS320C6713 DSP Board에 포팅하여 실험한 결과 제안된 시스템의 시뮬레이션 결과와 동일한 컬러 이미지가 출력됨을 확인하였다.

• 만화애니메이션 연구
• /
• 통권36호
• /
• pp.469-491
• /
• 2014

웹툰은 출판만화에서 사운드를 시각적으로 표현했던 방법을 발전시켜왔으며, 웹 기술의 발전을 토대로 직접 소리를 들려주기까지 한다. 직접 들리는 소리는 당연히 사운드 분석의 대상이 된다. 그러나 들리지 않는 사운드도 분석 대상이 될 수 있다. 본 연구는 들리지 않는 소리를 분석할 수 있다는 것의 이론적 토대를 인지심리학의 이중부호 개념에 둔다. 작가는 자신의 청각적 기억을 시각적으로 기호화할 수 있고, 독자는 기억과 인출의 과정을 통해 시각화된 기호를 보고 사운드를 떠올릴 수 있다. 이와 같은 웹툰의 들리지는 않지만 떠올릴 수 있는 사운드와 직접 들리는 사운드 두 경우를 본 연구는 함께 분석대상으로 한다. 구체적 분석을 위해서는 이론적 성과물이 있는 영화 사운드 분석 방법을 활용할 수 있다. 소리를 구성하는 세 요소인 음량, 음조, 음색은 음향학에서는 주파수 등으로 설명되고 직접 들을 때는 느낌으로 알지만, 시각적으로는 사운드를 표현한 글자나 이미지의 선의 굵기와 위치, 음원의 이미지 등으로 알 수 있다. 내화면 사운드와 외화면 사운드의 시각적 표현은 만화의 칸과 관련이 있다. 일반적으로는 칸 외부로 외화면 사운드를 표현하지만 웹툰에서는 듣는 자를 강조하는 방법으로 칸 내부에 외화면 소리를 표현하기도 한다. 그리고 영화의 호러 장르가 장르 효과를 높이기 위해 사운드를 많이 사용하는데 웹툰에서도 호러 장르가 같은 효과를 위해 사운드를 많이 사용한다. 이러한 영화 사운드 분석 방법을 활용해 사운드를 이미지로 표현한 작품들을 분석해볼 때, 초창기 출판만화에서부터 시작한 사운드의 청각적 표현들이 계속 발전해서 웹툰에서 창의적으로 표현되고 있음을 알 수 있다. 특히 세로 이동을 활용한 칸의 배치 및 소리표현의 방식들은 웹툰이 보여준 새로운 방법들이며, 칸 모양도 훨씬 다양해졌다. 직접 들려주는 소리로는 BGM이 가장 먼저 사용되었는데 최근에는 한 회의 분위기에 맞춰 음향효과까지 섞어 맞춤 작곡된 곡들이 사용된다. 그리고 스크롤 이동에 맞춰 소리를 들려주는 프로그램이 개발되면서 특정 순간의 음향효과나 특정 장면에 어울리는 음악들을 들을 수 있게 되었다. 특히 호러 장르에서는 특정한 이미지와 공포를 불러일으키는 사운드를 같이 사용하여 장르적 효과를 배가시킨다. 이렇게 웹툰에서는 다양한 사운드 시각화 방법이 계속 창조되고 있으며 기술과 접목된 새로운 시도들이 이루어지고 있다. 이러한 발전은 웹툰이 하나의 문화콘텐츠로서의 융합의 장이 될 수 있음을 보여준다.

• 한국콘텐츠학회논문지
• /
• 제14권11호
• /
• pp.50-59
• /
• 2014

영화에서 사운드는 화면상의 표현에 사실감을 부여하거나 과장된 효과를 이용해서 이미지를 부각하는 기본적인 역할을 수행하며, 관객으로 하여금 영화 속 대부분의 소리가 일상적인 것으로 받아들이게 한다. 그러나 영화 속 사운드는 실제 현실에서 접하는 '소리'가 아니라 영화적 재현을 위해 허구적으로 연출된 장치이다. 이러한 기능들로 인해 관객은 스크린을 통해서 허구인 영화의 세계가 마치 현실처럼 느껴지는 독특한 '현실감'을 체험하게 되는 것이다. 따라서 사운드연출은 청각적 요소의 운용을 통한 독창적인 이미지 전달로 이러한 현실재현에 기여해야하며 나아가 다양한 영화적 표현들이 효과적으로 관객에게 전달되기 위해서는, 주관적 청점을 기반으로 한 사운드연출이 우선적으로 고려되어야한다.

• 한국콘텐츠학회논문지
• /
• 제18권8호
• /
• pp.82-91
• /
• 2018

본 논문은 들뢰즈의 영화미학, 메를로-퐁티의 현상학적 관점에서 고다르 <카르멘이라는 이름>의 사운드를 고찰하고 있다. 현악 사중주의 리허설 장면은 음악 자신을 비추는 거울 이미지로서, 주 내러티브와의 단절 속에 현재와 과거의 식별 불가능성을 갖는 결정체-이미지가 된다. 한편, 도시 소음과 파도는 순수 시지각적(음향적) 이미지로 구성된 배아로서, 소리의 병치와 대체, 그리고 지향적 연결을 통해 보이는 것과 충돌하는 순수 음향적 결정체로 성장하게 된다. 그러나 이러한 음향적 모순들도 메를로-퐁티의 변증법적 사유를 통해 '단일 운동'으로서의 통합된 소리 범주로 나아가게 되며, 팝음악과 고전음악의 변증법적 사운드 운용조차도 더 이상 장르적 대립이 아닌 소리라는 질료적 범주로 통합된다. 본 연구는 고다르 영화의 사운드 미학을 철학적 사유를 통해 풀어나감으로써 기존연구와 차별화하고 있다.

• 감성과학
• /
• 제10권4호
• /
• pp.613-622
• /
• 2007

최근 사운드 디자인은 기업에서 제품에서부터 마케팅, 웹에 이르기까지 기업이미지를 고려한 기억에 남을 만한 경험의 멜로디를 디자인하여 사용하고 있고, 생활환경이나 공공시설 등 여러 분야에서도 사운드가 각 분야의 아이덴티티 확립에 필요한 요소로 사용되고 있다. 지방자치단체시대를 맞이하여 각 지자체에서는 지역 활성화를 위한 지역 아이덴티티의 확립에 지역의 정체성 확보와 지역의 잠재력, 자원을 활용한 지역개발에 많은 관심을 기울이고 있다. 또한 도시이미지 제고를 위해 지역이미지통합사업(CIP) 등 적극적인 사업을 추진하고 있다. 그러나 이러한 일련의 사업들은 시각적인 측면에 치우치거나 인식의 부족으로 인하여 아이덴티티 구축에 한계가 있다. 소리의 고장인 전주에 소리에 관련된 축제와 대회가 많이 개최되고 있으나, 정작 소리에 대한 아이덴티티가 없는 상황이다. 따라서 전주만의 특색 있는 소리의 조건을 제시하고 이를 통해 지역이미지 활성화를 위한 아이덴티티 구축에 필요한 요소로서 활용될 수 있도록 자료를 제공하는 것이 본 연구의 목적이다. 본 연구에서는 지역 의 소리 이미지를 찾기 위한 소리 샘플은 지역민이 가장 선호하는 자연의 소리 중 한국의 아름다운 소리100을 사용하였다. 이중 선호 샘플을 추출하여 각 샘플에 대한 형용사이미지를 설문을 통해 요인 분석을 하였다. 분석 결과 전주지역의 특색 있는 소리이미지 요인으로는 조화, 강약, 대비, 문화성을 고려한 밝고, 경쾌하며, 편안한 소리 이미지를 도출할 수 있었다. 이는 지역이미지 활성화를 위한 아이덴티티 구축에 필요한 요소로서 활용될 수 있도록 자료를 제공하는 데 있다.