• 만화애니메이션 연구
• /
• 통권35호
• /
• pp.329-346
• /
• 2014

미술은 한 사회의 정치, 경제, 사회, 문화가 만들어낸 시대적 산물이다. 최근의 디지털 매체의 발전은 예술에서 표현을 확장하는데 기여하였다. 디지털 매체는 이미지뿐만 아니라 소리나 물리적 지각 반응을 예술 창작의 한 요소로써 활용하는 것을 가능하게 한다. 또한 디지털 매체는 이미지, 소리, 빛, 그리고 다양한 조형 요소들 간의 재 융합이나 관객의 물리적 반응의 결합을 통해서 작품과 관객과 상호소통적인 공감각적이고 시지각적인 환경을 창출하도록 돕는다. 본 연구에서는 최근에 소리에 반응하는 다양한 미디어아트 작품들이 제작되고 있는데, 주로 관객이나 외부의 자극으로부터 발생되는 소리의 물리적 데이터를 시각화하는 작업에 초점을 두고 시지각적 관점에서 소리의 반응에 따른 데이터의 시각화와 작품의 이미지와 관객의 반응 관계 등을 분석하였다. 외부의 소리로부터 생성되는 물리적 데이터는 여러 가지 관점에서 분석될 수 있다. 예를 들면, 음성이나 외부 소리의 고저(pitch), 음량, 또는 주파수 분석을 통해서 데이터 분류가 가능하다. 본 연구자는 관객의 음성이나 외부의 물리적 자극을 통해서 발생되는 소리의 주파수를 분석하여 이에 상응하여 발광하는 LED기반 시각화 연구를 통해서 최근 새로운 미디어아트의 가능성을 모색하고, 실시간으로 생성될 수 있는 물리적 데이터들을 빛(LED)의 환영적 특성으로 변환함으로써 우연하게 관객에 반응하여 생성되는 다양한 시각이미지의 연출 가능성을 탐구하였다. 결과적으로 연구자는 사운드에 반응하는 시지각적인 인터랙티브 작품을 구현해보기 위하여 피에트 몬드리안(Piet Mondrian, 1872~1944)의 브로드웨이 부기우기(Broadway Boogie Woogie, 1942~3)작품을 모티브로 삼았다. 몬드리앙은 회화의 본질적인 표현 요소들을 단순화하는 작업으로 불필요하다고 생각된 요소들을 하나씩 제거하여 색, 수직선, 수평선으로 대상을 추상화시킴으로써 그 대상의 본질에 다가가고자 하였다. 연구자는 몬드리앙의 이러한 단순화된 구성을 외부의 소리 자극을 단순화하여 빛(LED)의 요소로 재현하는 시각적 표현의 메타포로 사용하였고, 몬드리앙의 정적 구성에서 빛과 소리의 공감각적인 표현을 극대화하는 동적 구성으로의 관객의 참여를 유도하는 환경을 구현해 보았다.

• 방송과미디어
• /
• 제3권2호
• /
• pp.44-58
• /
• 1998

최근의 멀티미디어 기술은 정보의 디지털화와 온라인화에 따라 가전, 컴퓨터, 통신 및 방송 기술이 융화되어 가는 추세에 있으며, 대화형의 하이브리드 멀티미디어 기술을 그 특징으로 하고있다. 하이브리드 멀티미디어는 컴퓨터 그래픽 및 미디(MIDI) 기술로 인위적으로 생성한 2D/3D그래픽 및 음향을 실제의 자연적인 영상과 소리에 추가하여 합성하므로 생성된다. MPEG-4는 이렇게 인위적으로 합성되거나 자연적인 영상 혹은 음향 정보의 디지털 하이브리드 멀티미디어 부호화를 목적으로 하며, 활성화된 혼합 미디어의 내용기반 처리, 상호, 동작 및 사용자의 쉬운 접근 등을 가능하게 한다. SNHC(Synthetic-Natural Hybrid Coding)는 기존의 수동적인 미디어의 전달뿐 아니라 실시간 처리가 가능한 인터랙티브 응용 분야까지 다루고 있으며, 통합된 시공간 부호화 기법을 사용하여 시각, 청각, 2차원, 3차원 컴퓨터 그래픽스 등 다양한 형태의 표준 AV(Aural/Visual) 객체를 처리한다. 표준화는 주로mesh-segmented 비디오 부호화, 구조물 부호화, 객체간의 동기화, AV 객체 스트림의 멀티플렉싱, 혼합 미디어 형태의 시-공간 통합화 등에서 이루어지게 되는데, 이는 궁극적으로 네트워크로 연결되는 가상 환경(Virtual Environment)에서 다수의 사용자가 서로 상호작용 할 수 있는 틀을 제공하는데 있다. 이러한 틀이 제공되면, 대화형 하이브리드 멀티미디어라는 새로운 형태의 정보를 사용함으로써 기존의 미디어로는 경험하지 못하는 다양한 응용과 서비스를 경험할 수 있을 것이다.

• 한국콘텐츠학회논문지
• /
• 제16권3호
• /
• pp.116-124
• /
• 2016

본 논문은 아쿠아리움에 적합한 디지털 전시 콘텐츠에 대해 제시하며, 특히 경포 석호생태관 아쿠아리움의 전시에 대하여 기획하였다. 전체 공간에 대한 스토리텔링을 바탕으로 각 공간에 적합한 미디어 콘텐츠를 제시함으로써 전체 아쿠아리움과 동떨어진 것이 아닌 그 안의 각 요소에 자연스럽게 녹아들 수 있는 기획을 제시하고자 하였다. 아쿠아리움이라는 전시 특성상 전시와는 상관없지만 분명히 존재해야 하는 공간들이 존재하게 되는데, 이 공간들을 최대한 활용해 디자인함으로써 아쿠아리움 전체가 하나의 바닷속 공간인 것처럼 느껴지도록 유도하였다. 각 부분의 미디어 전시 기획은 공간에 적합한 미디어 플랫폼을 먼저 제시한 후 각각에 들어갈 콘텐츠를 기획하였다. 3D Water Projection, Kinect를 이용한 인터랙티브 미디어, Fog Screen로 총 3가지의 미디어 플랫폼의 사용을 제시하고, 그에 설치될 인터랙티브 전시 콘텐츠, 게임 콘텐츠, Fog Screen 콘텐츠에 대해서 기획하였는데, 이는 2D 드로잉 컨셉과 3D 전시 공간 모델링, 가상현실에서의 구현을 통해 제작되었다. 본 연구는 일반적인 전시와는 다른 특징을 갖는 아쿠아리움이라는 특정 전시 장르에 맞는 디지털 전시 콘텐츠를 단계적인 사전 시각화 방법을 통해 제시함으로써 차별화된 디지털 전시 콘텐츠를 제시했다는 데에 의의가 있다고 하겠다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.1265-1271
• /
• 2009

본 연구에서는 동양의 우주론적 철학의 집결체라 할 수 있는 주역(周易)을 서사적 관점에서 재해석하고 이를 디지털 스토리텔링의 방법론과 결합시킨다. 연구성과를 데이터베이스로 구축한 후 웹-카툰 형식으로 시각화하고 인터랙티브 요소를 가미하여 '주역 스토리텔링 웹-카툰 게임'을 개발한다. 게임의 유저는 주역 내러티브의 가이드라인을 따라가면서 이를 자유롭게 변형 해석하고 재배치하면서, 마치 놀이를 하듯이 새로운 이야기들을 창발적으로 만들 수 있다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2016년도 춘계학술발표대회
• /
• pp.826-829
• /
• 2016

뇌파는 뇌신경 세포의 활동으로 발생하는 전기적 변화를 두피 표면에서 측정하여 기록한 것이다. 뇌활동의 변화는 공간적 시각적으로 파악할 수 있는 지표이며, 바이오 센싱을 통해 측정된 데이터를 활용한 미디어 컨텐츠 적용이 최근 시도되고 있다. 본 연구는 미디어 컨텐츠 평가를 위한 감성 지표로 뇌파 데이터를 인간의 오감으로 느낄 수 있는 표현으로 변환하는 프로세스를 구현하는 함으로써 현재 행해지고 있는 많은 미디어 아트에 대해 뇌파를 활용한 실시간 객관적 감성지표를 완성하는데 목적이 있다. 이에 대한 사전 연구로 본 논문에서는 측정된 뇌파 데이터를 인터렉티브 컨테츠적인 요소인 사운드로 청각화 하는 과정을 구현하였다.

• 한국멀티미디어학회논문지
• /
• 제12권9호
• /
• pp.1342-1350
• /
• 2009

현재까지 디지털 디스플레이 시스템은 단순영상의 시연용, 감상용, 전시용 시스템이 대부분이며 음악과 움직이는 풍경으로 인해 색다른 영상작품으로 재해석되어 보여 질 수 있으며 사용자의 감수성을 자극한다는 장점을 가지고 있지만 개발된 시스템의 활용범위가 작고, 쉽게 흥미를 잃을 수 있는 시기성을 가진다는 단점이 있어 지속적인 사용자의 인터랙션을 유도할 수 있는 시스템이 필요하다. 따라서 본 논문에서 제안한 RSS기반 디지털 병풍 시스템은 사용자의 단순 감상용으로 활용하던 기존의 8폭 병풍의 한계를 극복하여 사용자가 직접 참여하고 체험할 수 있는 환경을 제공하고 필요한 정보를 효과적으로 획득 할 수 있는 인터랙티브 미디어 시스템으로써 의 활용을 목적으로 구현되었다. 본 시스템은 블로그나 사이트를 직접 방문하지 않아도 새로 등록된 글을 수집해 읽을 수 있는 RSS의 주된 기능을 적용하여 실시간으로 필요한 정보를 사용자의 의도에 맞게 전달 할 수 있어 평상시에는 관상용으로 콘텐츠를 감상할 수 있고, 필요에 따라 광고나 전시용으로 활용이 가능하며, 공공장소의 정보전달시스템으로도 사용가능한 장점을 가지고 있다.

• 한국콘텐츠학회논문지
• /
• 제12권9호
• /
• pp.40-47
• /
• 2012

미디어 아트는 새로운 경로의 인식과 지각을 동반하고, 기존의 미술과는 다른 인간의 신체를 도구화 하여 상호작용을 만들어내는 새로운 감상방식을 제안한다. 시각적인 영상을 제작하는 방식 중 포인트 클라우드는 점으로 형태를 표현한다는 점에 있어 서양미술의 점묘법과 유사하며 이는 전통회화 기법을 디지털 기술을 활용해 재구성한다는 의미를 가진다. 본 논문에서는 미학적 요소와 디지털 기술을 융합한 새로운 감상방식으로 포인트 클라우드 형태의 영상을 제작하여 홀로그램 필름에 투사하고, 관람자의 손짓이 영상과 상호작용하는 콘텐츠를 제시한다. 콘텐츠 제작은 콘텐츠 제작 배경 의도를 기획하고 포인트 클라우드 형태의 이미지 제작, 상호작용을 위한 3D 제스처 디자인 과정을 거쳐 최종적으로 홀로그램 필름에 투사하는 과정을 거친다. 콘텐츠는 사람의 의식 속에서 일어나는 기억의 회상 과정을 시각적, 체감적으로 표현한다. 이를 위해 기억의 회상 과정을 불확실한 기억, 기억의 구체화, 완전한 회상으로 설정하였다. 불확실한 기억은 포인트 클라우드 형태의 이미지를 통해 모호한 형태의 이미지로 표현되고, 상호작용으로 이미지를 조작하는 행위를 통해 기억을 구체화 해 나가면서 완전한 회상을 하게 된다.

• 한국컴퓨터정보학회논문지
• /
• 제24권12호
• /
• pp.35-41
• /
• 2019

본 논문에서는 원격 제어 홀로그램 기반 인터랙티브 사이니지 디자인에 대해 제안한다. 제안한 방식은 Raspberry Pi 하드웨어 플랫폼 및 Intel realsense r200 카메라를 사용하여 인터랙션이 가능한 홀로그램 사이니지 구조를 구성하였으며, 소프트웨어 파트는 원격 콘텐츠 관리를 위한 Screenly 솔루션과 콘텐츠 제어를 위한 Open CV 기반 솔루션을 기반으로 구성된다. 3D 게임 기술 Unity 5를 기반으로 한 3D 콘텐츠 렌더링 알고리즘을 사용하여 테스트를 진행하였으며, 홀로그램 피라미드 사이니지 구조를 사용한 모델 테스트를 통해 IoS 설계를 위한 3D 데이터 시각화 및 표출이 가능한 새로운 방식을 실험하였다. 본 논문에서는 해당 홀로그램 사이니지 모델에 대하여 기술하였다.

• 만화애니메이션 연구
• /
• 통권29호
• /
• pp.77-102
• /
• 2012

디지털 시대의 도래는 상호작용 미디어 아트의 비약적인 발전을 야기시켰다. 특히 관객이 작품과 분리된 대상으로 존재하던 전통 미술의 형식에서, 관객이 직접 작품 내에 접속하여 상호작용하고, 그 세계 내 일부, 주체로 활동하게 됨은 타 미술장르와 구별되는 그것만의 독자적인 특성이다. 본 연구의 목적은 인터랙티브 미디어 아트의 상호작용 과정들을 분류화 하여, 메를로 퐁티의 몸 현상학 이론들과 비교하고 그 의미를 고찰함에 있다. 메를로 퐁티의 몸 현상학은 대상/세계, 의식/정신, 주/객 등 이항대립적 사유가 만연하던 서구 지성사를 몸을 통한 통합적 인식을 주장하며 그 한계를 뛰어 넘고자 하였다. 이와 같은 세계와 주체의 새 시각을 견지한 메를로 퐁티의 몸 현상학 이론을 미디어 아트의 상호소통 과정의 세부 요인들과 비교하려는 것이다. 이를 위해, 미디어 아트의 상호작용 과정을 <작품 구성, 감상의 주요 요인인 관객의 신체>, <작품 감상방법의 현존적 체득>, <정해진 프로그램 내의 유영>, <통합되는 감각>, <가상세계 내에서 활동>으로 세분화하고, 이를 메를로 퐁티의 몸 현상학 이론 중 <몸틀>, <습관의 획득>, <몸의 구조화>, <지평의 종합>, <세계-에로-존재> 개념들과 비교하여 상호 유사점 및 의미를 탐색하였다. 그 결과 미디어 아트의 상호작용 과정에서 도출되는 신체성, 공감각성, 다중감각, 공간성 등은, 타 미술장르 및 미니멀리즘 미술양식보다 더욱 메를로 퐁티의 몸 현상학 이론들과 일맥상통함을 명료하고 세세하게 밝힐 수 있었고, 이를 통해 현대 상호작용 미디어 아트의 연구에 대한 새로운 방향을 제시할 수 있었다.

• 한국융합학회논문지
• /
• 제11권7호
• /
• pp.137-144
• /
• 2020

본 연구에서는 과학박물관의 기본 개념과 역할을 바탕으로 일상생활과 직접 관련 있는 과학 원리의 전시, 교육, 체험의 제공을 목표로 한 '소리 빛' 인터랙션 전시 콘텐츠와 체험 전시공간을 연구 개발해 국립광주과학관의 '소리 빛' 전시 공간에 구현한다. 연구의 범위는 기존 과학관의 체험형 콘텐츠 선행 연구 사례와 현황을 살펴, 과학관 체험형 전시의 조건과 요소를 정의하고 그를 바탕으로 체험형 전시 시나리오와 어린이를 대상으로 한 콘텐츠를 연구 개발했다. 본 연구 개발 콘텐츠의 성과는 첫째, 빛과 소리를 테마로 인터랙티브 홀로그램 체험 콘텐츠를 개발한다. 둘째, 다수의 프로젝터에 의한 프로젝션 매핑을 통해 미디어 파사드 면을 다면화해 시각적으로 넓고 스펙터클한 화면 구성과 애니메이션을 실현한다. 셋째, 다양한 컬러와 소리를 함께 움직이며 관람객과의 상호작용이 가능한 관람객 중심의 전시, 체험을 실현한다. 마지막으로 홀로 스크린을 통한 홀로그램 인터페이스를 통해 인터랙티브 콘텐츠를 제공하여 전시 정보의 단순한 전달이 아닌 관람에 대한 다수 관람객의 적극적 참여를 유도하며 전시 재방문을 증진한다. 일련의 연구를 통해 최근 과학관의 추세인 테마파크적 성격을 지닌 콘텐츠 및 체험 전시공간 연구 개발이 가능했다.