• Journal of Broadcast Engineering
• /
• v.27 no.5
• /
• pp.654-664
• /
• 2022

Immersive content overcomes spatial limitations through convergence with extended reality, artificial intelligence, and photogrammetry technology along with interest due to the COVID-19 pandemic, presenting a new paradigm in the content market such as entertainment, media, performances, and exhibitions. However, it can be seen that in order for realistic content to have sustained public interest, it is necessary to study storytelling method that can increase immersion in content rather than technological freshness. Therefore, in this study, we propose a immersive content storytelling method using artificial intelligence and photogrammetry technology. The proposed storytelling method is to create a content story through interaction between interactive virtual beings and participants. In this way, participation can increase content immersion. This study is expected to help content creators in the accelerating immersive content market with a storytelling methodology through virtual existence that utilizes artificial intelligence technology proposed to content creators to help in efficient content creation. In addition, I think that it will contribute to the establishment of a immersive content production pipeline using artificial intelligence and photogrammetry technology in content production.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2018.07a
• /
• pp.385-386
• /
• 2018

최근 실감형 미디어에 대한 관심이 증폭되고 있으며 제조, 교육, 의료, 국방 등에 분야에서 기존 산업과 융합하여 많은 연구가 진행되고 있으며 MPEG에서도 이러한 실감형 미디어 기술에 대한 자체적인 표준화가 진행 중에 있다. 하지만 실감형 미디어에 대한 제작기술과 디스플레이기술에 대한 이슈는 있으나 콘텐츠 보호에 대한 기술 연구는 활발하게 진행되지 않고 있다. 더구나 실감형 미디어가 최근 웹하드, 토렌트 등에서 불법 유출 되고 있어 이에 대응한 저작권기술연구가 필요하다. 본 논문은 MPEG 산하에서 표준화가 진행되는 실감형 미디어 지원 포맷인 OMAF 구조를 설명하고 이에 대한 기술적 특징을 활용하여 특징점으로 활용될 수 있는 이미지 영역에 대한 선택 방안을 제안한다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.10a
• /
• pp.475-478
• /
• 2006

실감형 게임은 사람의 신체 움직임 및 오감을 최대한 반영한 리얼리티를 추구하는 전문적인 게임이다. 현재 개발된 실감형 게임들은 비 장애우를 대상으로 만들어 졌기 때문에 많은 움직임을 필요로 한다. 하지만 신체적 불편함을 가진 장애우들은 이러한 게임들을 이용하는데 어려움이 있다. 따라서 본 논문에서는 PC상에서 최소의 얼굴 움직임을 사용하여 수행할 수 있는 실감형 게임 시스템을 제안한다. 제안된 실감형 게임 시스템은 웹 카메라로부터 얻어진 영상에서 신경망 기반의 텍스쳐 분류기를 이용하여 눈 영역을 추출한다. 추출된 눈 영역은 Mean-shift 알고리즘을 이용하여 실시간으로 추적되어지고, 그 결과로 마우스의 움직임이 제어된다. 구현된 flash게임과 연동하여 게임을 눈의 움직임으로 제어 할 수 있다. 제안된 시스템의 효율성을 검증하기 위하여 장애우와 비 장애우로 분류하여 성능을 평가 하였다. 그 결과 제안된 시스템이 보다 편리하고 친숙하게 신체 장애우 에게 활용 될 수 있으며 복잡한 환경에서도 확실한 얼굴 추적을 통하여 실감형 게임 시스템을 실행 할 수 있음이 증명되었다.

• Information and Communications Magazine
• /
• v.32 no.2
• /
• pp.98-107
• /
• 2015

본 고에서는 3차원 동영상에서 움직임 정보 추출하고 이를 이용하여 홀로그램 콘텐츠를 효과적으로 생성하는 방법들에 대해 알아본다.

• Proceedings of the Korea Contents Association Conference
• /
• 2011.05a
• /
• pp.71-72
• /
• 2011

소프트웨어는 컴퓨터 및 시스템에 탑재되어 제품 및 서비스의 부가가치를 높이고 기업과 개인의 경쟁력을 향상시키는 핵심 기술로 국가 미래 산업 경쟁력의 원천이며, 기기 서비스 사람을 연결하는 산업 성장 엔진으로 임베디드 S/W, 시스템 S/W, 온라인 서비스 S/W, 지능형 S/W, 실감미디어 S/W로 분류가 되는데 이중에서 실감미디어 S/W는 미디어의 사실적인 표현 및 현장감 재현, 체험 공간 참여가 가능하도록 지원하는 S/W로서, 지능형 영상처리기술, 인터랙션기술 및 시뮬레이션 기술 등으로 구성된다. 단방향적인 시청각 서비스를 통한 감동전달 미디어 서비스에서 고품격의 미디어 서비스와 다양한 감각 기술을 활용한 혁신적이고 인간 친화적인 체감형 인터랙션 기술을 활용하여 미디어의 현실감을 극대화할 수 있는 실감미디어 S/W에 대한 국내외 기술의 개발 동향, 정책 동향, 사업 동향, 그리고 표준화 동향에 대해 고찰하고 발전 전망에 대해 논하고자 한다.

• The Journal of the Korea Contents Association
• /
• v.12 no.1
• /
• pp.91-102
• /
• 2012

Generally today's culture and the arts industry has been focusing more on economic value than the arts. Therefore this paper will elucidate the meaning of the culture and the arts can be a break though which can only include commercial and economic values but transcend its values ultimately. First of all, this paper will suggest an advanced 3D stereoscopic images by analysis of examples and environments of realistic media arts. Looking into the changes of related technologies and market environments, the motion-recognition technology, as seem in SF film "Minority report", has become a feasible technology. In the past, 3D stereoscopic images were shown in the theme park theatre and exhibition halls for group viewing. but recent 3D TV and display devices have changed those environments to personal. Since domestic researches of realistic media art has been little, this paper will analyze them respecting to three broad classifications. The results are : Firstly, in CAVE method, more impact capabilities of spectators are expected that they can manipulate interactive interfaces freely and the physical movements of spectators can operate interactively. Secondly, inter-network communications and expansion of viewers' perceptions are predicted by way of HMD method, sensor suites and communication equipments. Thirdly, combinations of HMD and motion tracking utilization is foreseen. With the convergent usages of these three features, we can prospect the possibilities of interactive 4D that spectators wearing 3D stereoscopic display devices can experience and make their own 3D stereoscopic images actively at the point of their views.

• Electronics and Telecommunications Trends
• /
• v.22 no.3 s.105
• /
• pp.12-19
• /
• 2007

현재 위치에서 목적지까지의 거리와 교통상황을 고려하여 최적의 경로를 안내하는 도로 및 교통 정보 제공 시스템인 차량용 내비게이션 시스템은 텔레매틱스의 가장 중요한 응용 분야이며 디지털 컨버전스의 핵심으로 부각되고 있다. 내비게이션 기술은 크게 2차원 또는 3차원 그래픽 기반 기술과 위성 영상이나 비디오 또는 실시간 영상에 기반을 둔 영상 기반 내비게이션 기술로 구분할 수 있으며, 최근에는 운전자의 시야에 보이는 실제의 도로의 모습을 카메라를 통해 실시간으로 취득한 후 경로 안내 정보를 부가하여 보여줄 수 있도록 하는 증강현실 기반의 실감 내비게이션이 차세대 기술로 연구되고 있다. 본 고에서는 이러한 실감 내비게이션 기술을 중심으로 국내외 기술개발현황과 한국전자통신연구원에서의 기술 개발 사례에 대하여 자세히 살펴보고 향후의발전 방향에 대해 전망해 본다.

• Journal of the Institute of Electronics and Information Engineers
• /
• v.52 no.7
• /
• pp.93-99
• /
• 2015

In this paper, we propose a gaze correction method for realistic video teleconferencing. Typically, cameras used in teleconferencing are installed at the side of the display monitor, but not in the center of the monitor. This system makes it too difficult for users to contact each eyes. Therefore, eys contact is the most important in the immersive videoconferencing. In the proposed method, we use the stereo camera and the depth camera to correct the eye contact. The depth camera is the kinect camera, which is the relatively cheap price, and estimate the depth information efficiently. However, the kinect camera has some inherent disadvantages. Therefore, we fuse the kinect camera with stereo camera to compensate the disadvantages of the kinect camera. Consecutively, for the gaze-corrected image, view synthesis is performed by 3D warping according to the depth information. Experimental results verify that the proposed system is effective in generating natural gaze-corrected images.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06a
• /
• pp.121-123
• /
• 2006

얼굴의 표정은 얼굴의 구성요소 같은 기하학적 정보와 조명이나 주름 같은 세부적인 정보들로 표현된다. 얼굴 표정은 기하학적 변형만으로는 실감적인 표정을 생성하기 힘들기 때문에 기하학적 변형과 더불어 텍스쳐 같은 세부적인 정보도 함께 변형해야만 실감적인 표현을 할 수 있다. 표정비율이미지 (Expression Ratio Image)같은 얼굴 텍스처의 세부적인 정보를 변형하기 위한 기존 방법들은 조명에 따른 피부색의 변화를 정확히 표현할 수 없는 단점이 있다. 따라서 본 논문에서는 이러한 문제를 해결하기 위해 서로 다른 조명 조건에서도 실감적인 표정 텍스처 정보를 적용할 수 있는 비선형 피부색 모델 기반의 표정 합성 방법을 제안한다. 제안된 방법은 동적 외양 모델을 이용한 자동적인 얼굴 특징 추출과 와핑을 통한 표정 변형 단계, 비선형 피부색 변화 모델을 이용한 표정 생성 단계, Euclidean Distance Transform (EDT)에 의해 계산된 혼합 비율을 사용한 원본 얼굴 영상과 생성된 표정의 합성 등 총 3 단계로 구성된다. 실험결과는 제안된 방법이 다양한 조명조건에서도 자연스럽고 실감적인 표정을 표현한다는 것을 보인다.

• Smart Media Journal
• /
• v.5 no.1
• /
• pp.122-129
• /
• 2016

In recent years, the Augmented Reality Technology is improving in order to support the user-oriented interaction depending on growing trend in smart phones. In this paper, we present the Realistic Experience App. Contents which help the smart phone users experience the real situations by using the Object Recognition Technology of the tourist attractions and the users' location information. The developed system pinpoints both the location of the user and that of the tourist spot object through the GPS of the smart phone and the information of Beacon, providing the realistic experience contents about the tourist attraction after estimating the distance and the direction between the user and the place. The Realistic Experience App. Contents are expected not only to impress the culture of Jeju on the tourists but also to increase the potential to uncover the unknown tourist attractions and improve the image of Jeju as one of the best sightseeing cities.