• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제13권4호
• /
• pp.205-212
• /
• 2007

본 논문에서는 시점변환이 가능한 고화질 다시점 비디오 전송 시스템의 디자인 및 구현에 관해 소개한다. 다시점 비디오는 기존의 방송 시스템에 실감성과 몰입감을 증가시키는 차세대 방송 컨텐츠로 각광 받고 있다. 하지만 다시점 비디오 전송 시스템을 구축하기 위해서는 고비용의 하드웨어 컴포넌트들이 필요하고 충분한 대역폭이 요구된다. 본 프로토타입 시스템은 고비용 및 전송 대역폭의 문제를 해결하기 위해서 소프트웨어 기반의 시스템 컴포넌트와 IP 멀티케스트를 이용한 전송에 중점을 둔다. 또한 유동적으로 시점 및 사용자의 수를 화장할 수 있는 시스템 디자인을 고려한다. 본 논문에서는 소프트웨어 기반의 시스템 컴포넌트로 다중화와 역다중화의 구현과 얼굴 추적을 통한 시점전환 기법을 소개한다. 또한 선도망/연구망으로 구성된 실제 네트워크 상황에서 전송 시현을 통해 사용자에게 실감성과 몰입감을 제공할 수 있음을 보여준다.

• 한국정보통신학회논문지
• /
• 제12권12호
• /
• pp.2146-2152
• /
• 2008

본 논문에서는 3차원 디지털 시네마 영상의 압축을 위하여 다해상도 기반 렌더링(MultiResolution-based Rendering, MRBR) 기법을 이용한 JPEG2000 압축코덱 구조에 대하여 제안하였다. 스테레오 영상에 이산 웨이블릿 변환(discrete wavelet transform, DWT)과 다해상도의 웨이블릿 영역에서 스테레오 정합(stereo matching)기법을 적용하여 변이정보를 추출하고 기준영상과 같이 전송한다. 또한 추출된 다른 시점의 영상은 비폐색영역으로 인한 화질열화가 발생하므로 이를 보상하기 위하여 비폐색영역이 포함된 원 주파수정보와 대상 시점에서 주파수정보의 차이를 같이 전송한다. 변이정보는 변이공간에서의 동적계획법(dynamic programming)을 이용하여 추출하였다. DWT의 특성상 상위 부대역은 하위 부대역과 높은 상관성을 갖는다. 따라서 coarse-to-fine 방법을 이용하여 상위 부대역에서 얻어진 변이정보를 하위 부대역에 적용하여 탐색영역을 제한함으로써 일반적인 동적계획법에 비하여 연산량을 단축시켰으며 정확도를 향상시켰다.

• 방송공학회논문지
• /
• 제11권4호
• /
• pp.483-494
• /
• 2006

본 논문에서는 기존 디지털방송 시스템과의 호환성을 유지하면서 3차원 방송 서비스를 하기 위한 MPEG-2 시스템의 PSI(Program Specific Information) 구조를 제안하고, 이를 기반으로 3차원 방송 시스템을 설계 및 구현한다. 제안한 PSI 구조는 2차원 또는 3차원 콘텐츠를 구별하기 위한 디스크립터를 포함하고 있어 서비스 사업자에게 2차원 또는 3차원 콘텐츠를 임의로 구성할 수 있는 기능을 제공하며 기존 디지털 방송 수신기에서는 이를 무시하도록 설계하였다. 또한, 제안하는 시스템을 통해 전송되는 3차원 방송은 시청자의 인터랙션을 통하여 2차원 또는 3차원 모드로 선택하여 시청할 수 있는 기능이 가능하여 시청자의 시청 선호도 폭을 향상시킬 수 있다.

• 방송공학회논문지
• /
• 제25권1호
• /
• pp.25-35
• /
• 2020

최근 하드웨어 성능뿐 아니라 영상 처리 기술의 발달로 인해 다양한 분야에서 사용자에게 자유로운 시야각과 입체감을 제공하는 3차원 포인트를 다루는 기술에 관한 연구를 지속하고 있다. 3차원 포인트를 표현하는 형식 중 포인트 클라우드 기술은 포인트를 정밀하게 획득/표현할 수 있다는 장점으로 인해 다양한 분야에서 주목받고 있다. 하지만 하나의 3차원 포인트 클라우드 콘텐츠를 표현하기 위해 수십, 수백만 개의 포인트가 필요하므로 기존의 2차원 콘텐츠보다 많은 양의 저장 공간을 요구한다는 단점이 존재한다. 이러한 이유로, 국제 표준화 기구인 MPEG (Moving Picture Experts Group)에서는 3차원 포인트 클라우드 콘텐츠를 효율적으로 압축 및 저장하고, 사용자에게 전송하는 방안에 대해 계속 연구를 진행 중이다. 본 논문에서는 MPEG-I (Immersive) 그룹에서 제안한 V-PCC(Video based Point Cloud Compression) 부호화기를 통해 생성된 V-PCC 비트스트림을 MMT (MPEG Media Transport) 표준에서 정의한 MPU (Media Processing Unit)로 구성하는 방안을 제안한다. 또한, MMT 표준에서 정의한 시그널링 메시지를 확장하여 3차원 포인트 클라우드 콘텐츠의 영역 선별적 전송 방안을 위한 파라미터와 사용자의 요구에 따라 선택적으로 품질 파라미터를 결정할 수 있도록 V-PCC에서 상정하는 품질 파라미터를 추가 정의한다. 마지막으로, 본 논문에서는 제안한 기술을 기반으로 검증 플랫폼의 설계/구현을 통해 결과를 확인한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2010년도 추계학술대회
• /
• pp.108-110
• /
• 2010

최근 3D 비디오 서비스에 대한 관심이 고조되고 있는 가운데, 지상파 DMB 및 위성 DMB에서도 스테레오스코픽 비디오 서비스를 제공하기 위한 노력이 진행되고 있다[1]-[3]. DMB-AF 파일 포맷[4]은 MPEG에서 제정한 DMB 파일 포맷 국제 표준이다. 이 표준 제정 당시에는 스테레오스코픽 비디오 콘텐트를 지원하는 기능이 들어 있지 않았다. 본 논문에서는 DMB-AF 한 파일 내에서 2D 비디오, BIFS에 의해 스테레오스코픽 이미지가 오버레이된 2D 비디오, 스테레오스코픽 비디오 등이 시간적으로 혼용될 수 있는 방법을 제안한다. 또한 이 방법은 기존 2D 비디오의 재생만 지원하는 기존 DMB-AF 플레이어와의 호환성을 보장한다. 따라서 기존 DMB-AF 플레이어가 BIFS에 의해 스테레오스코픽 이미지가 오버레이된 2D 비디오 또는 스테레오스코픽 비디오가 포함된 DMB-AF 파일을 재생할 때에는 2D 이미지 또는 2D 비디오로 재생할 수 있다. 제안한 방법은 한 프레임을 좌우로 반으로 나누어 좌안 및 우안 비디오를 좌우로 배치한 화면분할(side-by-side) 포맷에 의한 스테레오스코픽 비디오뿐만 아니라 좌안 또는 우안 비디오 중 하나는 2D 재생용의 기준 비디오로 다른 하나는 스테레오스코픽 비디오를 위한 부가 비디오로 사용하는 기본 포맷에 의한 스테레오스코픽 비디오도 지원한다. 후자의 경우, 부가 비디오는 가로 해상도가 기준 비디오의 1/2인 선택사항 포맷도 지원한다. 스테레오스코픽 비디오를 지원하기 위해, 기존 DMB-AF 표준의 확장을 최소화하는 방법을 제안한다.

• 만화애니메이션 연구
• /
• 통권49호
• /
• pp.633-649
• /
• 2017

본 연구는 시각 미디어가 영화에서 3D 입체영화로, 그리고 VR로 진화함에 따라 인간의 관찰 자유와 관람 양상이 어떻게 변화하고 있는 양상을 계보학 관점에서 개념화하는 것을 목적으로 한다. 더불어 VR의 매체 미학적 특징을 밝히고 VR이라는 뉴미디어의 정체성과 존재론을 규명하고자 한다. 미디어는 인간의 가장 인공적인 감각인 시각을 중심으로 진화했다. 회화, 영화, 텔레비전, 컴퓨터 등 시각 미디어를 중심으로 하는 모든 재현 장치의 중심에는 스크린이라고 하는 제 3의 시각공간이 존재해왔다. 특히 움직이는 이미지를 재현하는 미디어인 영화와 텔레비전, 비디오 등의 스크린은 관객의 움직임을 통제하면서 완전한 환상과 시각적 만족을 추구했다. 이른바 관람객의 부동성을 전제로 '움직이는 가상의 시선(a mobilized virtual gaze)'을 확보한 것이다. 관객은 부동의 자세로 고정된 좌석에 앉은 채 시각으로만 영화적 환상을 경험한다. 그들은 수동적이고 소극적이며 피동적으로 스크린 너머의 환상의 세계를 의심 없이 받아들인다. 그러나 디지털 패러다임의 등장과 더불어 시각 미디어의 진화는 재현 매체의 전통에 큰 변화를 만들어낸다. 3D 입체영화는 스크린이라는 제 4의 벽(the fourth wall)의 소멸을 예고하였다. 관객은 더 이상 고정된 좌석에 앉아 앞만 응시하지 않는다. 3D 입체영상의 Z축 등장은 이야기의 공간을 재편성한다. 관객의 시선도 '앞'에서 '상 하 좌 우' 심지어 '앞 뒤'라고 하는 여섯 개의 방향으로 확장한다. 뿐만 아니라 이미지 사이에 관객을 위치하게 함으로써 수동적이었던 관객을 적극적이고 상호작용적, 체험적 주체로 변모시킨다. 한걸음 더 나아가 VR시대로 진입한 시각 미디어는 감금했던 관객의 신체에 자유를 부여한다. VR은 관람객의 이동가능성을 확보하며 동시에 가상과 물리적 공간을 공존시킨다. 따라서 VR콘텐츠의 관객은 참여와 이동을 전제로 일체화된 정체성을 획득하게 된다. 이른바 재현이 아닌 스크린의 시뮬레이션 전통을 계승하면서 환상의 공간을 재구성하면서 미학적 체계를 완성하는 것이다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2010년도 추계학술대회
• /
• pp.145-148
• /
• 2010

본 논문에서는 3차원 스테레오 영상에서의 시각적 피로도와 안구의 운동량과의 상관관계를 도출하고 시각적 피로도 측정 시스템을 제안한다. 제안한 측정 방법은 3차원 스테레오 영상 시청자의 피로도가 누적되었을 때, 안구의 단속성 운동(saccade)이 감소할 것이라는 가정에 기반을 둔다. 액티브 셔터글라스 방식의 3D 안경을 착용한 시청자의 동공을 검출하고 추적하기 위해 적외선 광원 및 적외선 카메라를 이용한다. 획득한 영상에 대해 이진 임계화를 적용하고 타원 피팅을 수행하여 동공의 위치를 검출한다. 피팅된 타원의 이심률과 크기 및 위치를 제한하여 검출 오류를 줄인다. 검출된 동공의 위치를 바탕으로 안구의 단속성 운동량을 측정한다. 실험에는 변이 정도가 크지 않아 편안하게 시청 가능한 스테레오 영상과 과도한 변이를 가져 시청하는데 불편한 영상이 분리되어 사용되었다. 이들 영상에 대해 각각 실험자의 단속성 운동량을 측정하였다. 실험 결과에서 안구의 단속성 운동량이 변이가 큰 영상에서 그렇지 않은 영상에 비해 감소하는 경향이 나타났다.

• 방송공학회논문지
• /
• 제17권5호
• /
• pp.789-807
• /
• 2012

본 논문은 시청안전성을 위한 콘텐츠 제작 가이드라인을 최종 목표로 하여, 콘텐츠의 내용이나 정황과 함께 시청자의 불편감을 유발하는 변위(disparity)의 다양한 요인들을 찾아내는 것을 목적으로 한다. 그 방법으로 네 가지의 스테레오스코픽 콘텐츠를 피험자들이 시청하게 하고 시청자로 하여금 불편감을 느끼는 기간 동안 키를 누르게 하여 실험적인 데이터를 획득한다. 콘텐츠에 대해서는 초점과 그 주위(관심영역, region of interest), 그리고 화면전체에 대하여 변위의 크기와 변화 정도에 대한 데이터를 도출한다. 각 콘텐츠에 대하여 준비한 두 종류의 데이터를 갖고 실제로 콘텐츠를 시청하면서 피험자들이 불편감을 느낀 부분을 분석하여 그 요인들을 찾는다. 모든 콘텐츠에 대한 요인들을 종합적으로 분석하여 요인별 강도를 도출한다. 분석결과는 강도가 큰 요인별부터 실제 콘텐츠의 내용과 더불어 설명한다. 그 결과는 이미 짐작할 수 있는 요인들뿐만 아니라 알려져 있지 않은 요인들까지 실증적으로 보인다.

• 한국통신학회논문지
• /
• 제34권10B호
• /
• pp.1117-1123
• /
• 2009

DMD(Digital Micro-mirror Device)와 갈바노 스캐너를 이용한 두부 고정형 다초점 디스플레이 시스템은 초점조절이 가능하여 스테레오스코픽 디스플레이에서 발생하는 양안의 수렴작용과 단안의 초점조절 작용의 불일치에 의한 눈의 피로 문제를 해결할 수 있는 디스플레이 시스템이다. 이 시스템은 레이저 스캐닝 방법으로 각 시점에 대한 영상의 수렴점을 형성하여 관찰자 동공에 제공함으로 초점조절이 가능토록 한다. 본 논문에서는 이 다초점 디스플레이 시스템의 레이저 스캐닝 방법을 수학적으로 분석하였고, 이러한 분석에 기반 한 다초점 시스템을 제작하여 비디오카메라를 통하여 초점조절이 가능함을 보였고, 결과적으로 레이저 스캐닝 방법에 의한 다초점 시스템의 시점 형성원리가 검증되었다.

• 한국정보통신학회논문지
• /
• 제17권8호
• /
• pp.1908-1918
• /
• 2013

자유시점 또는 오토스테레오스코픽 비디오 서비스는 3차원 영상을 제공하는 차세대 방송 시스템으로, 여러 시점의 영상들이 필요하다. 본 논문에서는 가상 시점 영상을 고속 생성하기 위해 알고리즘 병렬 구조를 최적화하고, Compute Unified Device Architecture(CUDA)를 이용한 General Propose Graphic Processing Unit(GPGPU) 기반의 중간시점 영상 고속 생성을 위한 최적화 기법을 제안한다. 제안한 방법은 좌/우 깊이영상을 병렬화시킨 스테레오 정합알고리즘을 이용하여 변위정보를 얻은 후, 깊이 당 변위증분을 계산하여 사용한다. 계산된 변위증분을 사용하여 해당 각 화소들의 깊이 값을 이용하여 좌/우 영상들을 원하는 위치의 중간시점으로 영상을 이동시킨다. 그 다음, 비폐색영역들을 서로 상호 보완하여 없앤 다음에 남은 홀들은 홀 필링으로 없애 최종 중간시점 영상을 생성한다. 제안한 방법을 구현하여 여러 실험 영상에 적용한 결과, 생성된 중간시점 깊이영상의 화질은 평균 PSNR 30.47dB이었으며, Full HD급 중간시점 영상을 초당 38 프레임 정도 생성하는 속도를 보였다.