• 방송공학회논문지
• /
• 제25권4호
• /
• pp.475-486
• /
• 2020

본 논문은 첨단 공연 및 전시를 위한 미디어아트 기술에 대한 논문으로 틸트 브러쉬를 사용하여 가상현실 속에서 인터랙티브 스트로크를 생성하도록 한 후 이를 미디어 파사드 기법을 통하여 공연에 실시간으로 투사하였다. 우리의 전통 극 중 봉산탈춤에서 선적인 움직임을 추출하였으며, 틸트 브러쉬로 구현된 선의 움직임을 'Multi-face Convergence'라고 이름을 붙인 미디어아트 공연에 사용하였다. 모션 데이터가 가상공간에 들어오면 면으로 이루어진 지오메트리가 가상현실 공간에 생성되게 된다. 생성된 스트로크는 다양한 브러쉬 타입을 설정할 수 있으며, 공연 시에는 역동적인 움직임에 어울리는 붉은 불의 이펙트가 가미된 스트로크를 사용하였다. 가상현실에서 구현된 인터랙티브 스트로크는 1인 관객을 위한 가상현실 디바이스인 HMD(Head-mounted Display)를 넘어 다수의 관객들이 감상할 수 있도록 하기 위하여 미디어 파사드 기술을 사용하여 공연 공간에 투사하였으며 봉산탈춤을 추는 무용수와 동시에 어우러질 수 있도록 하였다. 가상현실이라는 매체는 폐쇄성이 높은 매체로 공연에 녹아들어 표현하기에는 적절치 않은 특성을 가지고 있지만, 본 공연에서는 미디어 파사드라는 기법으로 그 한계를 넘어섰다. 본 연구는 세계 최초로 인터랙티브 스트로크를 전통춤 퍼포먼스에 결합하여 퍼포머가 표현하는 선의 현상을 미디어 파사드 기술로 공연장에 투사하는 공연 기술 방식을 제안한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 하계학술대회
• /
• pp.1241-1244
• /
• 2022

최근 K-Pop 을 위시한 예술공연 콘텐츠에 몰입형 미디어를 접목한 온택트 (Ontact) 미디어 스트리밍 서비스가 주목받고 있는 가운데, 본 논문은 일반적으로 사용되는 2D 디스플레이 또는 HMD (Head-Mounted Display) 기반 VR (Virtual Reality, VR) 서비스에서 탈피하여, 대형 가상현실 공연장을 위한 360 도 VR 비디오 스트리밍 시스템을 제안한다. 제안된 시스템은 Phase 1, 2, 3 의 연구개발 단계를 밟아 6DoF (Degrees of Freedom) 시점 자유도를 지원하는 360 도 VR 비디오 스트리밍 시스템을 개발하는 것을 최종목표로 하고 있으며, 현재는 Phase 1: 대형 가상현실 공연장을 위한 3DoF 360 도 VR 비디오 스트리밍 시스템 프로토타입의 개발까지 완료되었다. 구현된 스트리밍 시스템 프로토타입은 서브픽처 기반 Viewport-dependent 스트리밍 기술이 적용되어 있으며, 기존 방식과 비교하였을 때 약 80%의 비트율 감소, 약 543%의 영상 디코딩 속도 향상을 확인하였다. 또한, 단순 구현 및 성능평가에서 그치지 않고, 실제 미국 UCSB 에 위치한 대형 가상현실 공연장 AlloSphere 에서의 시범방송을 수행하여, 향후 Phase 2, 3 연구단계를 위한 연구적 기반을 마련하였다.

• 한국융합학회논문지
• /
• 제8권5호
• /
• pp.145-153
• /
• 2017

가상현실을 활용한 공연콘텐츠의 성공사례가 늘어나면서 전 세계적으로 공연 관련 기술과 콘텐츠 산업의 가치성에 대한 관심이 급증되고 있다. 그러나 영상기술을 활용하여 성공을 거둔 <태양의 서커스> 이후 많은 콘텐츠들이 무분별하게 디지털 영상기술을 이용한 공연들을 제작하면서, 미흡한 스토리라인, 공간구성, 공연연출로 인하여 콘텐츠의 완성도 및 다양성이 떨어졌다는 비판적 시각을 받고 있다. 이러한 디지털 영상기술을 활용한 공연은 기존의 공연과는 다른 제작과정 단계의 특징들을 기획 과정부터 철저히 고려하여 제작하여야 한다. 본 연구에서는 가상현실 활용한 공간 구성에 중점을 두고 무대 구성의 시각적 요소, 무대 공간성을 살리는 연출법, 퍼포머의 움직임과 활용성 등으로 나누어 콘텐츠 공간 구성과 연출의 적합성에 대해 사례 분석하였다. 이를 통해 전통무대가 지닌 한계성을 영상의 시 공간 속으로 전이시켰으며, 트랜스미디어의 가능성을 열어주었다.

• 한국콘텐츠학회논문지
• /
• 제18권9호
• /
• pp.544-554
• /
• 2018

본 연구는 4차 산업혁명시대의 무용분야의 현실-가상 미디어 연결 시스템을 분류하고 무용작품에서의 현실-가상 미디어 연결 시스템 활용을 사례 분석한 문헌연구이다. 본 연구의 대상은 인터렉티브 미디어 무용공연으로 제한하여 청키 무브(Chunky Move)의 "Glow"(2006), 남영호 "S.U.N"(2011)와 "달항아리"(2013), 아드리안 앤 클레이레(ADRIEN M & CLAIRE B)의 "PIXEL"(2014), 미다스 프로젝트(Midas Project)의 "Midas Space"(2011)에서 사용된 현실-가상미디어 연결시스템의 사례들을 연구하였다. 연구 결과 첫째, 현재까지 이루어진 무용공연에서의 현실-가상미디어연결시스템은 크게 동작 트레킹 시스템과 프로젝션 맵핑으로 구성되었다. 둘째, 사례 연구에서는 작품별로 다양하고 독창적인 현실-가상미디어 연결시스템이 고안되었고, 이 시스템은 움직임과 영향을 주고 받았으며, 시스템은 작품의 주제와 밀접한 관계를 맺었다. 따라서 앞으로 인공지능의 개발을 통해 현실-가상미디어연결시스템의 적극적인 사용, 모션 트레킹이 가능한 사물인터넷의 발달 가능성을 인지, 무용가와 엔지니어 간의 소통, 사례연구를 추가적으로 진행하여야 한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2006년도 학술대회 1부
• /
• pp.513-518
• /
• 2006

본 논문에서는 특별한 스튜디오 조명이 아닌 가정용 혹은 학교용 조명 하에서 동작하는 감정 표현이 가능한 그림자 놀이 도구를 소개한다. 이 놀이는 사용자의 실사로부터 추출된 가상 그림자에 사용자의 동작에 따라 실시간으로 반응하는 가상 표정 애니메이션 캐릭터를 투영한다. 이 놀이 도구는 행위전시 등의 공연 환경뿐만 아니라 가정, 학교 등의 일상 환경에서도 동작이 가능하도록 설계되었다. 따라서 가장 일반적인 조명의 하나인 가정용 형광등과 백열등 환경을 가정하였고, 배경에 대해서는 어떤 제약도 가정하지 않았다. 사용자의 실사를 구분하는 과정에는 배경 차분화 기법을 사용하였고, 빛의 산란 및 실제 그림자의 영향 등으로 인한 잡음을 최소화하기 위해 몇 가지 잡음 제거 알고리즘을 결합하여 적용하였다. 이 도구에서 가상 그림자의 표정 애니메이션은 사용자의 손동작에 따라 변화하며, 손동작 및 머리 위치의 추적을 위해 새로이 고안한 자질 기반 추적 기법을 적용하였다. 이 도구는 공연장에서의 인터렉티브 미디어 아트 전시 또는 공연, 아동 대상의 미술 교육, 예술치료 등의 분야에 활용될 수 있을 것으로 판단된다.

• 디지털콘텐츠학회 논문지
• /
• 제19권2호
• /
• pp.309-318
• /
• 2018

본 연구에서는 실감콘텐츠(VR AR MR)를 활용한 공연장 마케팅 방안을 제안하였다. 공연장은 관객이 직접 체감할 수 있는 공간이며, 공연장 마케팅 방안은 다음과 같다. 첫째, 공연장 좌석의 배치를 활용한 마케팅전략이다. 이는 가상현실(VR)을 통해 관객에게 원하는 관람석에서 공연이 어떤 각도와 시야로 관람되는지에 대한 예상이 가능하며 몰입감이 높은 좌석을 예매하도록 유도한다. 둘째, 혼합현실(MR)을 통해 공연 홍보 및 광고물을 활용한 콘텐츠 마케팅이다. 기존의 정적인 홍보수단에 비해 공연예술의 현장감을 살린 동적 홍보가 가능하다. 셋째, 등장 캐릭터를 활용한 마케팅전략이다. 공연은 1회성 예술이다. 이를 보완하도록 등장캐릭터가 공연의 한 장면을 증강현실(AR)콘텐츠로 사전에 제공하여 공연에 대한 흥미를 유발하도록 한다. 넷째, VR 소셜 네트워크를 구축하여 고객과 직접 소통하는 방법이다. 이를 통해 공연장 활성화를 위한 관객 유치에 도움이 되고자 한다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제30권3호
• /
• pp.23-41
• /
• 2024

최근 가상 아바타를 이용하여 가창과 안무를 표현하는 다양한 가상 아바타 음악 콘텐츠가 제작되고 있으며, 가상 아티스트들의 인기가 높아짐에 따라 오프라인에서도 가상 아바타 콘서트를 하는 사례도 등장하고 있다. 하지만 가상 아바타가 악기를 연주하는 밴드 콘텐츠의 제작 사례는 찾아보기 어려우며, 전면의 대형 스크린을 사용하는 오프라인 가상 아바타 콘서트는 가상 현실 특유의 환상적인 연출과 높은 자유도를 활용하기 어렵다는 단점이 있다. 본 논문은 이러한 제한점에 영감을 얻어, 가상 밴드 아이돌 Verse'day의 가상 아바타 밴드 콘텐츠 제작과 몰입형 인터랙티브 공연 제작 사례를 소개한다. 먼저, 본 논문에서는 모션 캡쳐 시스템과 실시간 엔진을 활용해 밴드 연주 애니메이션과 뮤직비디오를 제작한 과정을 소개한다. 이어서, 오프라인 콘서트에서 프로젝션 매핑과 실시간 상호작용 응원봉을 사용해 몰입형 인터랙티브 가상 아바타 공연을 제작한 사례를 소개한다. 마지막으로, 본 논문의 제작 사례를 바탕으로 향후 가상 아바타 음악 콘텐츠 제작을 위한 연구 방향을 제언하였다. 우리는 본 제작 사례가 향후 다양한 가상 아바타 음악 콘텐츠 제작과, 몰입형 인터랙티브 오프라인 가상 아바타 콘서트 제작에 영감을 줄 수 있을 것으로 기대한다.

• 한국컴퓨터정보학회논문지
• /
• 제29권9호
• /
• pp.99-107
• /
• 2024

본 연구는 컴퓨터를 기반으로 한 디지털 기술이 융복합 공연예술에 있어서 어떠한 영향을 미치는지를 국내 공연예술의 시대적 흐름에 따라 분석하였다. 분석한 내용을 바탕으로 공연예술과 기술의 적절한 활용방안과 미래 융복합 공연예술 발전방안을 도출하고자 연구목적을 두었다. 연구 목적에 따른 분석 결과를 살펴보면 첫 번째 시작단계로 처음 영상기술을 활용한 공연예술 단계에서 발전된 영상기술의 활용은 홀로그램, 미디어아트, 3D 기법 등으로 발전되었다. 두 번째 단계로 인공지능과 로봇을 활용하여 기술과 예술이 융복합되었다. 인공지능은 음악을 작곡하고 무용을 안무하였으며, 연극 대본을 작성하였다. 또한 로봇이 무대 위에서 인간과 함께 공연하고 또 연주하게 되었다. 세 번째, 가상공간을 공연예술에서도 활용하게 되었다. 기존에 공연장, 무대 공간이 아닌 가상공간을 활용한 다양한 장소의 공간 연출이 가능할 수 있게 되었다. 이처럼 디지털 기술을 활용한 공연예술은 더욱 다양해지고 전문적이며, 경계를 넘는 상상에서 가능한 일들이 현실로 개발될 것이다. 본 연구에서는 인간이 할 수 있는 창작의 영역, 그리고 표현하는 표현성, 예술성 등을 잃지 않고 지켜나가면서 디지털 및 컴퓨터의 다양한 기술을 적절하게 활용하는 융복합을 제안한다. 이러한 시대적 변화에 대비한 미래의 융복합 공연예술인은 디지털 기술을 활용할 수 있는 무대기술 전문인력, AI와 함께 예술성을 표현할 수 있는 전문 배우, AI를 조작하여 예술을 창작할 수 있는 전문인력의 예술성과 기술성을 복합적으로 갖출 수 있어야 한다.

• 한국음향학회:학술대회논문집
• /
• 한국음향학회 1999년도 학술발표대회 논문집 제18권 2호
• /
• pp.451-454
• /
• 1999

서양음악의 연구는 음향학의 측면에서 수십년 동안 연구가 진행되어왔다. 이를 통해 콘서트홀의 음향학적 특성을 평가할 수 있는 객관적 지표들을 제시할 수 있었다. 하지만 국악에 있어서는 공연장에 대한 음향학적인 지표가 공식화된 것이 없고, 게다가 지표를 찾기 위한 충분한 국악전용 공연장의 수가 부족하다. 따라서 본 논문에서는 국립국악원 예악당의 모델을 기초로 한 컴퓨터 모의실험을 통해서 얻어진 가상 국악공연장을 바탕으로 RT, Warmth, IACC, ITDG 등의 4가지 지표를 가지고 각기 다양한 시료를 제작하여 청취실험을 실시하였다. 그 결과 서양음악과는 다른 경향의 RT, Warmth 선호도를 추출할 수 있었다.

• 한국콘텐츠학회:학술대회논문집
• /
• 한국콘텐츠학회 2018년도 춘계 종합학술대회 논문집
• /
• pp.279-280
• /
• 2018

본 연구는 무용공연에서 사용되는 실시간 인터렉티브 미디어 시스템(interative media system)을 사이버물리시스템(CPS, Cyber-Physical System)의 관점으로 분석한 것이다. 4차 산업혁명시대에서 극대화된 가상공간과 현실공간의 연결성과 자동화가 무용예술에서 어떤 양상으로 일어나고 있는지 알아보기 위해 실시간 인터렉티브 미디어시스템을 활용한 무용공연들을 대상으로 연구한 결과, 사이버물리시스템의 연산, 통신, 조작의 과정들은 모션트레킹시스템(motion tracking system)을 통해 물리개체인 무용수들의 움직임, 근육 내부의 반응 등의 정보에 따라 조작되어 소프트웨어의 연산을 거쳐 프로젝션 맵핑(projection mapping)으로 영상으로 출력되는 과정을 거치는 것으로 나타났다. 추후, 다양한 사례연구를 통해 무용공연에서의 4차 산업혁명 요소들을 구체화하여야한다.