• 방송공학회논문지
• /
• 제26권5호
• /
• pp.533-542
• /
• 2021

본 연구에서는 한국 전통예술 중 하나인 진도 북춤을 다양한 인공지능 기술을 이용하여 디지털 아트로 재창조하는 과정을 제안하였다. 인공지능 언어 분석 기술을 통해 정량화된 관객들의 감정 데이터는 프로젝션 맵핑 공연에서 다양한 오브젝트 형태로 개입하여 큰 스토리에 변화를 주지 않는 선에서 영향을 준다. 대부분의 인터렉티브 아트들이 공연자와 영상 간의 소통을 표현한 것이라면, 본 공연은 인공지능 감정분석 기술을 중심으로 관객이 작품과 직접 소통할 수 있는 새로운 형태의 반응형 공연이 된다. 이는 한국 전통예술에서만 흔히 나타나는 관객이 공연에 직간접적으로 개입하여 영향을 끼치는 퍼포먼스인 '추임새'에서 시작된다. 공연자의 '프롤로그'에 담긴 감정 정보를 기반으로 관객의 감정 정보와 결합하여, 공연에 쓰이는 이미지와 파티클의 형태로 변환함으로서 공연에 관객이 간접적으로 참여하고 변화를 줄 수 있는 형태가 된다.

• 한국콘텐츠학회논문지
• /
• 제20권10호
• /
• pp.89-99
• /
• 2020

본 연구에서는 음악 가사의 감성분석을 통한 영상작품의 제작을 시도하였다. 가사 텍스트의 감성분석에는 구글(Google)의 자연어 처리 API를 활용하였고 그 결과를 영상 시각화 규칙과 연결하였다. 기존의 공학적 연구들에서의 텍스트 기반 감성분석은 소셜 미디어에서의 사용자 댓글과 리뷰를 분석해서 사용자들의 감정과 태도를 이해하도록 하는 연구들이 많았다. 본 연구에서는 감성분석 데이터가 예술작품 창작의 재료가 되어 심미적 표현에 활용될 수 있도록 하였다. 기계의 관점에서 볼 때 감정은 숫자로 치환되어 나타나므로 규격화, 표준화 될 수밖에 없다는 한계점이 있다. 이에 가사 데이터의 감성분석 결과를 시각예술에서의 조형요소들의 규칙과 연결하여 이러한 한계를 일부 극복해보자 하였다. 본 연구는 인공지능이 인간의 고도화 된 정신적 산물인 예술작품의 창작까지 시도하는 현 시대를 반영하며 문학, 음악, 회화, 무용 등 기존의 전통적인 예술작품을 기계를 통해 바라본 새로운 형태의 예술작품으로 만들어 보고자 하는 목표를 가지고 있다. 더불어 감정표현에 어려움을 겪는 발달 장애인들의 창작활동과 심리분석 및 의사소통을 용이하게 해주는 예술창작 및 교육 플랫폼으로 확장되기를 기대한다.

• 기호학연구
• /
• 제56호
• /
• pp.45-70
• /
• 2018

르네상스 이후부터 지속되어 온 재현체계에 관한 포스트모던 철학의 비판은 시각주체의 경험과 대상을 분리하고, 환경과 인간을 분리하는 이분법적인 사고체계에 관한 비판으로 궤를 같이 한다. 1960년대 포스트모던한 흐름으로 등장한 일련의 작품에서 강조된 상호작용성은 1990년대 후반 디지털 아트의 인터랙티브한 차원으로 계승되었다. 디지털 아트의 핵심적인 특성은 현장에서 관객의 참여에 따라 예측할 수 없는 결과 혹은 저마다의 미세한 변화를 반영한 무한대의 변이들을 만들어낸다는 점이다. 이 과정에서 컴퓨터 프로그램의 중요성이 부각되고, 기존 프로그램을 그대로 차용하는 것이 아니라, 아티스트가 직접 알고리즘을 작성하고 프로그래밍하는 경우 혹은 프로그래머와 협업을 통해 고유한 알고리즘을 만들어내는 경우가 점점 증가하고 있다. 프로그래밍 자체를 창작 행위로 간주해야 하는 패러다임으로 전환되는 중이라고 말할 수도 있겠다. 현재 주목받고 있는 시뮬레이션과 VR 기술은 현실의 감각과 시공간을 재현해내는 기술로 각광받고 있는데, 시뮬레이션 기술이 예술 분야에 도입되면서, 실험적인 작품들이 창작되는 중이다. 장 보드리야르가 제시한 시뮬라시옹 개념은 '어떤 현실을 본따 매우 사실적으로 만듦'을 대변하는 개념이라기보다는 '실재하는 현실과 어떤 관계를 맺고 있는 전혀 다른 현실'을 주목하게 만드는 개념이다. 이때 시뮬라시옹은 진실과 거짓의 문제를 따질 주제가 아니라, 형이상학적인 의미가 없는, 전통적인 실재와는 전혀 다른 성질의 실재를 지칭한다. 전통적인 질서에서 이미지가 실재 세계의 재현에 대응했다면, 알고리즘 아트의 시뮬레이션 이미지들 그리고 시뮬레이션된 시공간은 '체험을 용이하게 만드는 예술 형식'이라 할 수 있다. 다수의 알고리즘 아트는 상황, 현실, 생태계, 생명체 등의 복합적인 속성을 시스템으로 모델화하여 (특정 혹은 개별) 대상을 구조화하고 활성화하는 데 목표를 두고 있으며, 세계의 시뮬라시옹에 주목한다. 본 논문에서는 세계의 시뮬라시옹을 다루는 이안 쳉의 작품을 통해, 21세기 인공지능 기술의 등장과 함께 변화하고 있는 문화예술의 패러다임을 살펴보고자 한다. 또한 이안 쳉의 라이브 시뮬레이션과 같은 새로운 형식의 콘텐츠 앞에서 우리가 취해야 하는 태도 역시 논의하게 될 것이다. 사실 새로운 형식의 작품을 대면하는 순간은 전통적인 형식의 작품보다 훨씬 더 능동적인 입장을 요구한다. 본 논문이 제시하는 포스트-재현 형식의 문화예술 작품은 개인적인 경험의 순간에 이루어지는 감각과 지각 과정이 완성이나 종결로 수렴될 수 없음을 기술로 구현하고 있다. 이때 관객에게 요구되는 것은 바로 능동적 인식과 상황적 지식임을 이야기하고자 한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2020년도 춘계학술발표대회
• /
• pp.530-531
• /
• 2020

최근 인공지능을 활용하여 예술 작품에 몰입할 수 있도록 무대 효과를 디자인하는 연구가 진행되고 있다. 무대 효과 중에서 무대 배경은 공연의 분위기를 형성한다. 춤의 장르별로 무대 배경에 사용되는 이미지를 생성하기 위해 소셜 미디어 기반 무대 배경 생성 시스템이 있다. 하지만 같은 장르 춤은 동일한 무대 배경 이미지가 제공되는 문제가 있다. 같은 장르의 춤이지만 노래의 분위기를 반영하여 차별된 무대 배경 이미지를 제공하는 것이 필요하다. 본 논문은 노래 가사의 감정을 활용하여 Generative Adversarial Network(GAN)을 통해 각 노래의 분위기를 고려한 무대 배경 이미지를 생성하는 방법을 제안한다. GAN은 노래에 포함된 단락별 감정 단어를 추출하여 스타일을 생성하도록 학습된다. 학습된 GAN은 노래 가사에 포함된 감정 단어를 활용하여 곡의 분위기를 반영한 무대 배경 이미지를 생성한다. 노래 가사를 고려하여 무대 배경 이미지를 생성함으로써 곡의 분위기가 고려된 무대 배경 이미지 생성이 가능하다.

• 트랜스-
• /
• 제14권
• /
• pp.1-33
• /
• 2023

최근 블록체인 기술을 활용해 데이터 창작자에게 데이터 소유권을 부여하는 웹(Web) 3.0이 차세대 인터넷으로 부상하며 NFT를 매개로 가상경제를 구축하는 메타버스가 주목받고 있다. 웹3.0은 콘텐츠 생성자가 중개자의 역할을 하는 플랫폼에 종속되지 않고 참여에 따른 정당한 이익을 보상받는 가치를 지향한다. 웹 3.0 시대 메타버스에서 디지털 자산의 소유권을 보장하기 위해서는 블록체인 NFT 기술 적용이 필수불가결하다. 본 연구는 이러한 시대적 변화를 인지하며, 메타버스의 개념과 특징을 고찰한 이론에 기반해 NFT 아트와 연결할 수 있는 메타버스의 5가지 특징을 ①'연속성', ②'실재감', ③'동시성', ④'경제성', ⑤ '첨단과학기술의 활용성'으로 도출했다. 그리고 이를 메타버스 기반 NFT 아트 <하이브리드 네 이처 Hybrid Nature> 작품 사례연구에 적용하여 메타버스 및 NFT 아트의 개념과 특징이 작품 내에 어떠한 식으로 반영되었는지 분석하였다. 본 연구를 통해 웹 3.0 기술과 예술, 시장과 산업의 접목 지점에서 기존의 예술시장과 다른 형태로 전개되고 있는 NFT 아트의 기본 개념을 파악하고, 경제적 투자 가치 이외에 NFT 아트의 예술적, 미학적, 문화적 가치를 연구하는 것의 필요성을 제기하고자 하였다. NFT 아트를 학술적으로 분석하고 미학적 특징을 고찰한 연구가 희소한 현 상황에서 향후 관련 분야 연구자 및 전문가들이 메타버스 기반 NFT 아트의 장르적 특성과 구체적인 면모를 파악해나갈 수 있는 초석을 다졌다는 것에 본 연구의 의의가 있다.

• 한국콘텐츠학회논문지
• /
• 제18권9호
• /
• pp.544-554
• /
• 2018

본 연구는 4차 산업혁명시대의 무용분야의 현실-가상 미디어 연결 시스템을 분류하고 무용작품에서의 현실-가상 미디어 연결 시스템 활용을 사례 분석한 문헌연구이다. 본 연구의 대상은 인터렉티브 미디어 무용공연으로 제한하여 청키 무브(Chunky Move)의 "Glow"(2006), 남영호 "S.U.N"(2011)와 "달항아리"(2013), 아드리안 앤 클레이레(ADRIEN M & CLAIRE B)의 "PIXEL"(2014), 미다스 프로젝트(Midas Project)의 "Midas Space"(2011)에서 사용된 현실-가상미디어 연결시스템의 사례들을 연구하였다. 연구 결과 첫째, 현재까지 이루어진 무용공연에서의 현실-가상미디어연결시스템은 크게 동작 트레킹 시스템과 프로젝션 맵핑으로 구성되었다. 둘째, 사례 연구에서는 작품별로 다양하고 독창적인 현실-가상미디어 연결시스템이 고안되었고, 이 시스템은 움직임과 영향을 주고 받았으며, 시스템은 작품의 주제와 밀접한 관계를 맺었다. 따라서 앞으로 인공지능의 개발을 통해 현실-가상미디어연결시스템의 적극적인 사용, 모션 트레킹이 가능한 사물인터넷의 발달 가능성을 인지, 무용가와 엔지니어 간의 소통, 사례연구를 추가적으로 진행하여야 한다.

• 한국콘텐츠학회논문지
• /
• 제21권6호
• /
• pp.104-112
• /
• 2021

본 연구에서는 음악의 속성인 구성 요소 데이터들과 심리학의 감정 차원 모델을 기반으로 감정분석을 하였고 그 결과를 조형예술에서의 시각화 규칙에 적용하였다. 음악 속성 데이터를 활용한 기존의 연구들에서는 사람들이 원하는 음악을 분류, 검색, 추천할 수 있도록 하는 보다 실용적인 목적을 가진 사례들이 많았다. 본 연구에서는 특히 음원 분석에 따른 음악의 감정분석을 기반으로 사운드 데이터가 예술작품 창작의 재료가 되어 심미적 표현에 활용될 수 있도록 하는 것에 집중하였다. 음악의 시각화 연구를 위해서는 예술이 가지는 중요한 속성인 감정표현을 가능하게 하는 방법이 필요하였고 이를 위해 잘 구조화된 음악의 기본 속성 분류 및 감정 정보의 분류 체계를 마련하였다. 그리고 조형요소의 형태, 색상, 애니메이션을 통해 음악 요소들에 대해 감정을 기반으로 세분화 된 입력 매개 변수들을 반영하여 시각화하는 작업을 수행하였다. 본 연구는 음악 시각화를 활용하는 작가들에게 기초 자료로 활용될 수 있을 것이다. 또한 감정분석에 기반 한 음악 구성요소와 시각화 매칭을 위한 분석 방법 및 작품 결과는 향후 인공지능 기반의 자동화 된 시각화 연구의 기반이 될 수 있을 것이다.

• 문화기술의 융합
• /
• 제9권3호
• /
• pp.425-433
• /
• 2023

본 연구에서는 미술 전공 신입생들의 창의적 사고를 촉진하기 위해 게이미피케이션 개념과 AI 생성 예술 프로그램을 활용한 가상 예술가 놀이 수업 모델을 개발하였다. 중국 쓰촨영화&텔레비전대학교 디지털미디어아트과 1학년 신입생들을 대상으로 한 이 수업은 미술 창작에 대한 두려움 해소와 문제해결 능력을 향상시키는 것이 목표이다. 이교육 모델은 페르소나 설정, 창의적 글쓰기, 텍스트 시각화, 가상 전시 등 4단계로 구성되어 있다. 페르소나 설정을 통해 학생들은 예술가 정체성을 확립하였고, 게임적 요소를 도입한 글쓰기 체험으로 잠재적인 창의성을 발견할 수 있었다. AI 생성예술 프로그램을 이용한 텍스트 시각화를 통해 창작에 대한 자신감을 얻었고, 가상 전시에서 다른 학생들의 작품 감상 및 평가를 통해 예술가로서의 자존감을 높일 수 있었다. 게이미피케이션과 AI 생성예술 프로그램의 융합을 통한 이 교육모델은 창의적 사고와 문제해결 능력을 촉진하는 새로운 교육 방법이다. 또한 학습자들의 참여와 흥미를 높이는 효과가 있다. 이러한 연구 결과를 바탕으로 미래의 교육 환경에 적합한 창의적 사고를 기르는 교육 전략을 개발하고 적용함으로써, 더 많은 학생들이 예술적 역량과 창의력을 키울 수 있을 것으로 기대된다. 우리는 이러한 교육 전략을 통해 미술 전공 학생뿐만 아니라 다양한 분야의 학생들에게도 적용함으로써 예술적 역량과 창의성을 증진시킬 수 있을 것으로 기대한다.

• 문화기술의 융합
• /
• 제9권5호
• /
• pp.563-568
• /
• 2023

정부가 정신질환자의 기준을 강화하고 검진 대상을 전 국민으로 확대한 것은 달라진 시대 상황을 반영한 것이다. OECD의 발표(2021)에 따르면 세계 각국에서 코로나19 팬데믹의 장기화로 이후 우울증과 불안증의 발생이 2배 이상 증가 했으며, 그 중 한국의 유병률이 1위이기 때문이다. 하지만 그러나 정신장애로 진닫받은 사람 중 전문가의 상담과 치료를 받은 비율은 12.1%에 불과하다. 우울증과 단순 우울감의 차이는 의학적으로도 치료 대상이냐 일시적인 현상이냐에 따라 그 의미가 상당히 크지만, 우울감의 지속이 곧 우울증이라는 사실을 알 수 있다. 이러한 우울감의 감소를 위해 칸딘스키의 작품을 영상화하여 창작물을 제작하였다. 제작된 칸딘스키 영상의 재생 속도에 변화를 주어 진행한 실험에서 우울증 환자와 정상인을 비교했을 때 가장 큰 편차를 보였던 베타와 감마값이 90fps로 시청하였을 때 많이 증가하는 수치를 보여 우울감 완화에 가장 효과적이었다. 예술적 창작물은 개인의 시각에 따라 다르게 받아들여 질 수 밖에 없지만, 향후 인공지능과 전통적인 정신 건강 접근 방식을 통합하여 우울증을 겪는 개인의 현상을 개선할 수 있는 연구가 더욱 발전하여 치료에도 널리 이용되기를 희망한다.