• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.1081-1086
• /
• 2009

기술의 발전은 사회에 많은 변화를 일으키고 있다. 또한 기술의 발전은 예술 영역에 있어서도 형식과 내용에 많은 변화와 영향을 주고 있다. 컴퓨터 아트, 인터액티브 아트, 뉴 미디어 아트라고 불리는 새로운 예술 장르들이 탄생하였으며 예술가들은 다양한 기술과 접목하여 새로운 작품을 만들어 내고 있다. 뉴 미디어 아트의 중요한 특징 중 하나는 상호작용성인데 이것은 예술작품, 예술가, 그리고 관람자의 수용방식에 결정적인 변화를 가져왔다. 즉 뉴미디어 아트서의 예술작품은 완성태가 아닌 과정(process)으로 주어지고, 예술가는 작업의 초안자 또는 작업의 맥락을 규정하는 자로 규정되며, 작품과 관람자간의 상호작용이 무엇보다 강조된다. 그러나 기존의 뉴 미디어 작품에서 일어나는 상호작용성은 미리 계산된 범위 안에서 일어나는 제약이 있기에 진정한 상호작용성이라고 보기 힘들다는 비판도 있다. 이런 상호작용성은 공학적 세계관에 갇힌 닫힌 시스템으로서의 상호작용성이라고 말하며 미적인 상호 작용성의 도구로서 열린 시스템으로서의 새로운 작품의 필요성을 제시한 예술가들이 있다. 본 논문은 이러한 예술가들의 발자취를 따라 더 본질적인 미학적 상호작용성에 대한 고민과 함께 그에 따른 새로운 상호작용적 예술인 행동지향적 예술로서 인공지능, 인공생명 아트에 대하여 살펴보고자 한다.

• 한국콘텐츠학회:학술대회논문집
• /
• 한국콘텐츠학회 2018년도 춘계 종합학술대회 논문집
• /
• pp.155-156
• /
• 2018

뇌파 신호 등 생체 정보를 이용하여 상호작용적인 예술 콘텐츠를 설계 및 개발하는 방식에 대한 관심이 높아지고 있다. 이 논문은 EEG로 뇌파 신호를 수집하여 인공지능 기법으로 처리한 후에 사용자와 매체가 상호작용하는 콘텐츠 개발의 사례를 소개한다. 게임 등의 엔터테인먼트 콘텐츠와 미디어아트 등으로 연계되는 방식을 소개한다.

• 한국콘텐츠학회논문지
• /
• 제18권5호
• /
• pp.311-318
• /
• 2018

본 논문에서는 대화형 인공지능 인터랙티브 아트인 "진화하는 신, 가이아" 작품을 중심으로 예술 의미적인 배경과 작품이 구현된 기술적 구조에 대해 제시한다. 최근 여러 분야에서 인공지능의 기술을 사용하면서 예술 분야에도 이러한 시도가 접목되고 있다. 또한 과학의 발달로 생체모방 기술이나 인공생명 기술이 발달하면서 기계와 인간의 구분이 모호해지고 있다. 본 논문에서는 이러한 기계 생명의 은유를 담고 있는 예술 작품 사례를 제시하고, 본 작품에서 차별적으로 구현된 대화 시스템에 대해 상세히 부각한다. 본 작품에서는 로봇이 관객과의 자연스러운 소통을 위해 관객을 인식하여 바라보고 눈을 맞추며, 관객의 음성을 직접 인식하고 이에 따른 적절한 응답을 음성 합성으로 출력한다. 본 작품의 대화 시스템은 작품 내에 내장된 안드로이드 클라이언트와 질문-대답 사전을 내장한 서버로 구성된 질의응답시스템으로 구현되었다. 본 작품은 이러한 인터랙션을 통해 넓은 의미에서의 생명에 대한 의미를 논하며 관객과의 공감을 이끌어낸다. 본 논문에서는 작품의 기계적 구조와 대화 시스템 등의 제작 방법 및 관객 반응을 살펴봄으로써 인공지능 예술 작품의 제작 및 전시 기획에 기여하고자 한다.

• 방송공학회논문지
• /
• 제26권5호
• /
• pp.533-542
• /
• 2021

본 연구에서는 한국 전통예술 중 하나인 진도 북춤을 다양한 인공지능 기술을 이용하여 디지털 아트로 재창조하는 과정을 제안하였다. 인공지능 언어 분석 기술을 통해 정량화된 관객들의 감정 데이터는 프로젝션 맵핑 공연에서 다양한 오브젝트 형태로 개입하여 큰 스토리에 변화를 주지 않는 선에서 영향을 준다. 대부분의 인터렉티브 아트들이 공연자와 영상 간의 소통을 표현한 것이라면, 본 공연은 인공지능 감정분석 기술을 중심으로 관객이 작품과 직접 소통할 수 있는 새로운 형태의 반응형 공연이 된다. 이는 한국 전통예술에서만 흔히 나타나는 관객이 공연에 직간접적으로 개입하여 영향을 끼치는 퍼포먼스인 '추임새'에서 시작된다. 공연자의 '프롤로그'에 담긴 감정 정보를 기반으로 관객의 감정 정보와 결합하여, 공연에 쓰이는 이미지와 파티클의 형태로 변환함으로서 공연에 관객이 간접적으로 참여하고 변화를 줄 수 있는 형태가 된다.

• 방송과미디어
• /
• 제21권2호
• /
• pp.20-29
• /
• 2016

스마트폰의 등장과 더불어 융합은 매우 중요한 주제가 되었다. 이 글에서는 융합 미디어의 중요한 분야중의 하나인 뉴미디어 아트에서의 기술과 예술의 결합과 공생 가능성을 검토하고 테크놀로지와 예술의 협력의 역사와 트렌드에 대하여 고찰하며 컴퓨터로 대표되는 인공지능과 여러 뉴미디어 기술에서의 다양한 인문학 및 예술과의 연결점을 모색하며 인간과 기계의 공생을 위한 토대를 검토하고 예술의 확장에 기술의 요소가 어떤 역할을 할 수 있는지를 검토하고자 한다.

• 트랜스-
• /
• 제14권
• /
• pp.1-33
• /
• 2023

최근 블록체인 기술을 활용해 데이터 창작자에게 데이터 소유권을 부여하는 웹(Web) 3.0이 차세대 인터넷으로 부상하며 NFT를 매개로 가상경제를 구축하는 메타버스가 주목받고 있다. 웹3.0은 콘텐츠 생성자가 중개자의 역할을 하는 플랫폼에 종속되지 않고 참여에 따른 정당한 이익을 보상받는 가치를 지향한다. 웹 3.0 시대 메타버스에서 디지털 자산의 소유권을 보장하기 위해서는 블록체인 NFT 기술 적용이 필수불가결하다. 본 연구는 이러한 시대적 변화를 인지하며, 메타버스의 개념과 특징을 고찰한 이론에 기반해 NFT 아트와 연결할 수 있는 메타버스의 5가지 특징을 ①'연속성', ②'실재감', ③'동시성', ④'경제성', ⑤ '첨단과학기술의 활용성'으로 도출했다. 그리고 이를 메타버스 기반 NFT 아트 <하이브리드 네 이처 Hybrid Nature> 작품 사례연구에 적용하여 메타버스 및 NFT 아트의 개념과 특징이 작품 내에 어떠한 식으로 반영되었는지 분석하였다. 본 연구를 통해 웹 3.0 기술과 예술, 시장과 산업의 접목 지점에서 기존의 예술시장과 다른 형태로 전개되고 있는 NFT 아트의 기본 개념을 파악하고, 경제적 투자 가치 이외에 NFT 아트의 예술적, 미학적, 문화적 가치를 연구하는 것의 필요성을 제기하고자 하였다. NFT 아트를 학술적으로 분석하고 미학적 특징을 고찰한 연구가 희소한 현 상황에서 향후 관련 분야 연구자 및 전문가들이 메타버스 기반 NFT 아트의 장르적 특성과 구체적인 면모를 파악해나갈 수 있는 초석을 다졌다는 것에 본 연구의 의의가 있다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제29권4호
• /
• pp.1-6
• /
• 2023

메타버스 환경에서의 배경음악은 사용자의 몰입감을 증진시키기 위해 사용된다. 하지만 현재 대부분의 메타버스 환경에서는 사전에 매칭시킨 음원을 반복 재생하며, 이는 빠르게 변화하는 사용자의 상호작용 맥락에 어울리지 못해 사용자의 몰입감을 저해시키는 경향이 있다. 본 논문에서는 보다 몰입감 있는 메타버스 대화 경험을 구현하기 위해 1) 한국어 멀티모달 감정 데이터셋인 KEMDy20을 이용하여 발화로부터 감정을 추출하는 회귀 신경망을 구현하고 2) 음원에 arousal-valence 레벨이 태깅되어 있는 DEAM 데이터셋을 이용하여 발화 감정에 대응되는 음원을 선택하여 재생한 후 3) 아바타를 이용한 실시간 대화가 가능한 가상공간과 결합하여 몰입형 메타버스 환경에서 발화의 감정에 어울리는 배경음악을 실시간으로 재생하는 시스템을 구현하였다.

• 한국콘텐츠학회논문지
• /
• 제13권5호
• /
• pp.48-57
• /
• 2013

스마트폰은 소통과 정보공유의 환경을 제공하는 동시에 모바일 기술과 모바일 아트 발전의 핵심적인 역할을 담당하고 있다. 특히 모바일 증강현실시대의 도래와 더불어 스마트폰 기술관련 연구는 박차를 더해가고 있으나, 증강현실콘텐츠 산업에 핵심적인 사용자 참여 유발에 대한 연구가 부족하여 이런 특징이 이미 발달한 모바일 아트 영역에서의 도움이 필수적이다. 따라서 본 연구는 국내에서 거의 연구되지 않았던 모바일 아트를 피처 폰 활용과 스마트폰 활용으로 분류하고 각각 가장 많이 사용된 세 가지 방식을 중심으로 작품 사례를 분석한다. 모바일 기기의 사운드와 이미지를 이용한 피처 폰 활용은 설치와 공연 방식, 싱글채널 비디오 아트 방식과 오감소통 방식으로 나눌 수 있다. 센서, 카메라, GPS와 증강현실을 이용한 스마트폰 활용은 위치기반 AR, 마커인식 AR과 무마커식 AR로 분류된다. 또한 모바일 증강현실 콘텐츠 산업별 활용 기술을 살펴본 결과 관광과 게임관련은 위치기반 AR, 교육과 의료관련은 마커인식 AR, 쇼핑관련은 무마커식 AR 등을 중심으로 혼합방식으로 활용됨을 알 수 있었다. 증강현실 콘텐츠 산업의 발달은 사용자의 적극적인 참여를 통한 지속적인 소통방식과 혼합기술방식을 활용하는 모바일 아트의 참조로 더욱 가속화될 것으로 예상된다. 향후 모바일 증강현실 산업기술의 발전 방향은 HMD(Head Mounted Display)의 소형화, 홀로그램기술과 인공지능의 접목을 예측하고 있으며 빅데이터와 소셜네트워크를 활용하여 증강현실의 기술적인 한계를 극복할 수 있을 것으로 기대된다.

• 기호학연구
• /
• 제56호
• /
• pp.45-70
• /
• 2018

르네상스 이후부터 지속되어 온 재현체계에 관한 포스트모던 철학의 비판은 시각주체의 경험과 대상을 분리하고, 환경과 인간을 분리하는 이분법적인 사고체계에 관한 비판으로 궤를 같이 한다. 1960년대 포스트모던한 흐름으로 등장한 일련의 작품에서 강조된 상호작용성은 1990년대 후반 디지털 아트의 인터랙티브한 차원으로 계승되었다. 디지털 아트의 핵심적인 특성은 현장에서 관객의 참여에 따라 예측할 수 없는 결과 혹은 저마다의 미세한 변화를 반영한 무한대의 변이들을 만들어낸다는 점이다. 이 과정에서 컴퓨터 프로그램의 중요성이 부각되고, 기존 프로그램을 그대로 차용하는 것이 아니라, 아티스트가 직접 알고리즘을 작성하고 프로그래밍하는 경우 혹은 프로그래머와 협업을 통해 고유한 알고리즘을 만들어내는 경우가 점점 증가하고 있다. 프로그래밍 자체를 창작 행위로 간주해야 하는 패러다임으로 전환되는 중이라고 말할 수도 있겠다. 현재 주목받고 있는 시뮬레이션과 VR 기술은 현실의 감각과 시공간을 재현해내는 기술로 각광받고 있는데, 시뮬레이션 기술이 예술 분야에 도입되면서, 실험적인 작품들이 창작되는 중이다. 장 보드리야르가 제시한 시뮬라시옹 개념은 '어떤 현실을 본따 매우 사실적으로 만듦'을 대변하는 개념이라기보다는 '실재하는 현실과 어떤 관계를 맺고 있는 전혀 다른 현실'을 주목하게 만드는 개념이다. 이때 시뮬라시옹은 진실과 거짓의 문제를 따질 주제가 아니라, 형이상학적인 의미가 없는, 전통적인 실재와는 전혀 다른 성질의 실재를 지칭한다. 전통적인 질서에서 이미지가 실재 세계의 재현에 대응했다면, 알고리즘 아트의 시뮬레이션 이미지들 그리고 시뮬레이션된 시공간은 '체험을 용이하게 만드는 예술 형식'이라 할 수 있다. 다수의 알고리즘 아트는 상황, 현실, 생태계, 생명체 등의 복합적인 속성을 시스템으로 모델화하여 (특정 혹은 개별) 대상을 구조화하고 활성화하는 데 목표를 두고 있으며, 세계의 시뮬라시옹에 주목한다. 본 논문에서는 세계의 시뮬라시옹을 다루는 이안 쳉의 작품을 통해, 21세기 인공지능 기술의 등장과 함께 변화하고 있는 문화예술의 패러다임을 살펴보고자 한다. 또한 이안 쳉의 라이브 시뮬레이션과 같은 새로운 형식의 콘텐츠 앞에서 우리가 취해야 하는 태도 역시 논의하게 될 것이다. 사실 새로운 형식의 작품을 대면하는 순간은 전통적인 형식의 작품보다 훨씬 더 능동적인 입장을 요구한다. 본 논문이 제시하는 포스트-재현 형식의 문화예술 작품은 개인적인 경험의 순간에 이루어지는 감각과 지각 과정이 완성이나 종결로 수렴될 수 없음을 기술로 구현하고 있다. 이때 관객에게 요구되는 것은 바로 능동적 인식과 상황적 지식임을 이야기하고자 한다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제28권3호
• /
• pp.23-29
• /
• 2022

가상인간은 가상공간(가상 현실, 혼합 현실, 메타버스 등)에서 Unity와 같은 3D Engine 전용 모델링 도구로 구현된다. 실제 사람과 유사한 외모, 목소리, 표정이나 행동 등을 구현하기 위해 다양한 가상인간 모델링 도구가 도입되었고, 어느 정도 수준까지 인간과 의사소통이 가능한 가상인간을 구현할 수 있게 되었다. 하지만, 지금까지의 가상인간 의사소통 방식은 대부분 텍스트 혹은 스피치만을 사용하는 단일모달에 머물러 있다. 최근 AI 기술이 발전함에 따라 가상인간의 의사소통 방식은 과거 기계 중심의 텍스트 기반 시스템에서 인간 중심의 자연스러운 멀티모달 의사소통 방식으로 변화할 수 있게 되었다. 본 논문에서는 다양한 대화 데이터셋으로 미세조정한 인공신경망을 사용해 사용자와 자연스럽게 대화 할 수 있는 가상인간을 구현하고, 해당 가상인간이 생성하는 문장의 감정값을 분석하여 이에 맞는 표정을 발화 중에 나타내는 시스템을 구현하여 사용자와 가상인간 간의 실시간 멀티모달 대화가 가능하게 하였다.