• International journal of advanced smart convergence
• /
• 제13권1호
• /
• pp.77-84
• /
• 2024

This study delves into the subtle sounds emanating from beneath the earth's surface to unveil hidden messages and the movements of life. It transforms these acoustic phenomena into digital data and reimagines them as visual elements. By employing Sismophone microphones and utilizing the FFT function in p5.js, it analyzes the intricate frequency components of subterranean sounds and translates them into various visual elements, including 3D geometric shapes, flowing lines, and moving particles. This project is grounded in the sounds recorded in diverse 'spaces of death,' ranging from the tombs of Joseon Dynasty officials to abandoned areas in modern cities. We leverage the power of sound to transcend space and time, conveying the concealed narratives and messages of forgotten places .Through the visualization of these sounds, this research blurs the boundaries between 'death' and 'life,' 'past' and 'present,' aiming to explore new forms of artistic expression and broaden perceptions through the sensory connection between sound and vision.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 1부
• /
• pp.354-359
• /
• 2008

소리-시각 인터랙티브 설치미술인 "Water Music" 은 관객의 음성에 따라서 변하는 물결의 파동을 표현한다. 음정인식 기반 인터페이스 기술을 이용하여 벽면에 비디오 프로젝션 된 시각적 물결이미지로 나타난다. 물결이미지는 동양화의 붓으로 그린 물결과 작은 원형의 입자들을 생성하여 표현된 영상으로 구성된다. 관객은 입김을 불어 넣거나 소리를 냄으로써 화면에서 연속적으로 생성되는 컴퓨터 프로그램 기반 물결의 움직임과 상호 반응할 수 있다. 이러한 공생적인 소리 시각 환경은 관객에게 생각으로 그리고 신체적으로 환영적 공간을 경험하도록 한다. 본 설치작업에서 관객과 상호 반응 할 수 있는 움직이는 물결을 생성하기 위하여 적용된 주요 프로그램은 Visual C++ and DirectX SDK이며, 풀 프레임 3D 렌더링 기술과 파티클 시스템이 사용되었다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2016년도 하계학술대회
• /
• pp.258-259
• /
• 2016

일반적으로 UHD 방송 편집 시스템에서 UHD 영상의 데이터양이 막대하기 때문에 실시간 전송을 위해 코덱과 함께 압축하여 편집 서버로 혹은 편집 서버로부터 스트림 형태로 전송한다. BT.1120 형태로 전송 송출된 SDI (Serial Digital Interface) 내장 음향 데이터는 영상과 달리 보조 데이터 영역에 다른 메타 데이터들과 함께 합성되어 전송 송출되기 때문에 추출 및 합성이 상대적으로 어렵다. 특히 재생을 위해서는 영상 코덱으로부터의 출력 영상과의 동기를 고려해야 하고 음향 데이터를 BT.1120 표준에 맞춰 보조 데이터 영역에 합성해야하기 때문에 개발에 어려움이 있다. 이에 본 논문은 UHD 영상/음향 데이터의 실시간 획득/재생 시스템에서의 SDI 내장 음향 데이터의 추출 및 합성을 위한 FPGA (Field Programmable Gate Array) 기반 하드웨어 플랫폼을 제안하였다. 또한, 이를 위한 음향 데이터 추출 로직과 합성 로직을 HDL(Hardware Design Language) 설계하여 FPGA 내에 탑재하고 카메라/디스플레이/편집 서버와 통합하였다. 시험 결과 4K 60fps 데이터에서 정상적으로 영상과 음향을 분리/획득 및 합성/재생하였다.

• 한국콘텐츠학회논문지
• /
• 제5권5호
• /
• pp.145-151
• /
• 2005

MPEG II 비디오 스트림과 오디오 AC-3 스트림, 자막 스트림에 지역 코든 복제 방지 메뉴 등을 프로그램 하여 하나의 스트림으로 만들고, 시나리오에 따라 속성, 명령 및 작동을 부여하여 최종 디스크 이미지(DVD)를 만드는 과정을 오소링(Authoring)이라고 한다. 이러한 오소링(Authoring) 툴들은 다양하게 출시되어 있는데, 간단한 타이틀을 만드는 보급형부터 전문적인 영화 타이틀을 만드는 고급형까지 용도에 따라 선택하여 쓸 수 있다. 본 논문에서는 일반적인 IEEE 1394포트를 이용하여 영상과 음향을 컴퓨터로 캡처(Capture)해서 DVD를 만드는 오소링(Authoring) 과정을 일반인들이 Desktop PC로써 가장 많이 사용하고 있는 Window체계의 PC와 OSX 체계의 Macintosh를 중심으로 비교, 분석하고자 한다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2006년도 하계종합학술대회
• /
• pp.257-258
• /
• 2006

In this paper, we address several issues in the real time implementation of MPEG-1 Layer II decoder on a fixed-point digital signal processor (DSP), especially TMS320C6416. There is a trade-off between processing speed and the size of program/data memory for the optimal implementation. In a view of the speed optimization, we first convert the floating point operations into fixed point ones with little degradation in audio quality, and then the look-up tables used for the inverse quantization of the audio codec are forced to be located into the internal memory of the DSP. And then, window functions and filter coefficients in the decoder are precalculated and stored as constant, which makes the decoder faster even larger memory size is required. It is shown from the real-time experiments that the fixed-point implementation enables us to make the decoder with a sampling rate of 48 kHz operate with 3 times faster than real-time on TMS320C6416 at a clock rate of 600 MHz.

• Journal of information and communication convergence engineering
• /
• 제20권4호
• /
• pp.288-294
• /
• 2022

The media content market has been growing, as various types of content are being mass-produced owing to the recent proliferation of the Internet and digital media. In addition, platforms that provide personalized services for content consumption are emerging and competing with each other to recommend personalized content. Existing platforms use a method in which a user directly inputs video metadata. Consequently, significant amounts of time and cost are consumed in processing large amounts of data. In this study, keyframes and audio spectra based on the YCbCr color model of a movie trailer were extracted for the automatic generation of metadata. The extracted audio spectra and image keyframes were used as learning data for genre recognition in deep learning. Deep learning was implemented to determine genres among the video metadata, and suggestions for utilization were proposed. A system that can automatically generate metadata established through the results of this study will be helpful for studying recommendation systems for media super-personalization.

• 한국컴퓨터그래픽스학회논문지
• /
• 제29권3호
• /
• pp.21-31
• /
• 2023

본 논문에서는 디지털 휴먼을 활용한 버추얼 프로덕션에서의 촬영 사례를 소개한다. 본 촬영 사례는 LED를 활용한 버추얼 프로덕션의 시스템 구성과 디지털 휴먼을 활용한 효율적인 촬영 파이프라인을 다루고 있다. LED를 이용한 버추얼 프로덕션은 주로 LED에 배경을 투사하여 촬영하는 것과 달리 본 사례는 디지털 휴먼을 가상 배우로 사용하여 실제 배우와 소통하는 장면을 촬영하였다. 또한, 실제 배우와 디지털 휴먼의 대화 장면을 실시간 엔진을 이용하여 촬영하기 위해 음성과 텍스트 기반 한국어 립싱크 모션 자동 생성 기술을 적용하여 디지털 휴먼의 발화 애니메이션을 사전에 제작해 사용하였다. 우리는 실시간 엔진을 활용하여 LED 기반의 버추얼 프로덕션 환경에서 실제 배우와 디지털 휴먼을 이용한 짧은 드라마 콘텐츠를 제작함으로써 본 촬영 사례에 대하여 검증하였다.

• 방송공학회논문지
• /
• 제11권3호
• /
• pp.302-310
• /
• 2006

국내 위성 디지털 멀티미디어 방송 (DMB : Digital Multimedia Broadcasting)의 전송 표준방식은 DS-CDM-QPSK 방식으로 위성중계기와 지상중계기 (Gap-filler)를 통하여 다채널 고품질의 멀티미디어 방송 서비스를 제공할 수 있다. 그러나 다중 경로 페이딩 채널 환경에서는 방송 채널을 식별하는 Walsh 부호간의 직교성이 상실되고 다중 채널 간섭 (MCI : Multi-channel Interference)이 증가하여 수신 성능이 저하된다. 본 논문에서는 위성 DMB의 수신 성능을 향상시키기 위해 탭 선택 알고리즘을 사용한 칩 등화 수신기를 제안하고 기존의 Rake 수신기와 수신 성능을 비교 분석한다.

• 한국정보통신학회논문지
• /
• 제15권4호
• /
• pp.803-809
• /
• 2011

본 논문은 디지털 위성 라디오 방송의 채널 정보 업데이트 방법에 관한 것으로, 예를 들어 디지털 위성 라디오의 방송 수신 기능이 구비된 홈시어터, MP3 플레이어, 이동 전화기, 카오디오 등 과 같은 다양한 유형의 디지털 기기에서 새로운 디지털 위성 라디오(이하 XM으로 표기) 방송 채널 정보를 수신하게 되면, 현재 수신 중인 XM 라디오 방송 채널과 인접된 N 개의 전/후 방송 채널만을 지그재그(Zigzag) 방식으로 랜덤하게 선별 한 후, 이전의 XM 라디오 방송 채널 정보를 새로 수신된 XM 라디오 방송 채널 정보로 업데이트 함 으로써, 사용자가 거의 선국하지 않는 XM 라디오 방송 채널을 일괄적으로 모두 업데이트 하게 되는 것을 미연에 예방 할 수 있게 되므로, 실시간으로 자주 변경되는 XM 라디오 방송 채널 정보를 보다 효율적으로 신속하게 업데이트 시킬 수 있게 되는 매우 유용한 방법을 제시한다.

• 방송공학회논문지
• /
• 제17권6호
• /
• pp.990-1003
• /
• 2012

본 논문에서는 디지털라디오와 관련하여 동일계열 기술인 DRM과 DRM+ 전송방식을 기반으로 AM과 FM의 디지털방송 추진의 가능성과 필요성을 제시한다. 주파수 활용에서 IN-BAND와 OUT-OF-BAND 양쪽 모두 이용이 가능한 DRM+의 특징을 이용하여 FM밴드와 인접한 LOW-VHF 대역 TV채널 5번과 6번 주파수를 OUT-OF-BAND방식으로 디지털라디오방송을 추진할 때 기존 FM방송 신호와 충돌과 혼신이 없고, 새로운 라디오영역으로 확보 가능하며, 우수한 신호전달 능력이 있는지 확인하고자 하였다. 특히 IN-BAND방식 Hybrid 모드에서 SFN을 이용한 다수의 송신기 사용이 어려운 문제점을 언급하였다. 그와 반대로 DRM+에 의한 OUT-OF-BAND 방식은 다수의 송신기 배치가 가능하며, 기존 FM송신기 및 안테나와 콤바인이 쉽고, 사업자별로 출력지정과 권역설정이 자유로우며, AM/FM 통합 디지털라디오 제작과 보급에 유리하여 디지털라디오 추진에 적합한 방안이 될 수 있음을 제안하였다.