• 디지털융복합연구
• /
• 제19권12호
• /
• pp.405-411
• /
• 2021

가상현실 기술은 20 세기에 개발 된 새로운 실용적인 기술이다. 최근에는 가상현실(VR) 기술의 지속적인 발전과 개선으로 관련 산업이 빠르게 발전하고 있으며, 가상현실 기술의 활용으로 실감나는 다양한 영상콘텐츠는 사용자에게 더 나은 시각적 경험을 제공하고 있다. 또한 상호 작용 및 상상력 측면에서 뛰어난 특성을 가지고 있어 영상콘텐츠 제작 분야에서 밝은 전망을 기대할 수 있다. 본 논문은 현 단계에서 VR 비디오의 디스플레이의 종류, 기술, 그리고 사용자가 VR 비디오를 보는 방법을 소개하였다. 더불어 과거 VR 장비와 현재 장비의 해상도 차이를 비교 분석하고 해상도가 VR 영상에 영향을 미치는 이유를 탐구하였다. 미래 VR 영상 발전 중에서 몇개 발전 방향을 제출하고 사람들에게 생활 편의를 제공할 것이다.

• 방송공학회논문지
• /
• 제26권5호
• /
• pp.652-655
• /
• 2021

Versatile Video Coding(VVC)의 압축 효율을 끌어올리기 위하여 다양한 화면 간 예측(inter prediction)기법 중 적응적 움직임 벡터 해상도(Adaptive motion vector resolution, 이하 AMVR)기술이 채택되어 왔다. 다만, AMVR을 적용하여 최적의 해상도를 결정하기 위해서는 매 부호화 유닛마다 다양한 테스트를 진행해야 하며, 이는 율-왜곡 비용의 계산 복잡도 증가를 야기한다. 따라서 VVC의 부호화 복잡도의 감소를 위해 효과적으로 최적의 AMVR 모드를 찾아야 한다. 본 논문에서는 보다 다양한 데이터셋 기반 하에 경량화된 신경망 기반의 AMVR 결정 알고리즘을 제안한다.

• 전자공학회논문지
• /
• 제51권5호
• /
• pp.114-124
• /
• 2014

HEVC는 JCT-VC에 의해 개발된 최신 비디오 코딩 표준이다. HEVC는 H.264/AVC에 비해 약 2배의 주관적 코딩효율을 제공한다. HEVC 개발의 주요목표 중 하나는 UHD급 비디오를 효율적으로 코딩하는 것이기 때문에, HEVC는 UHD급 비디오를 코딩하는데 널리 사용될 것으로 예측된다. 이러한 고해상도 비디오의 복호화는 많은 양의 메모리 접근을 발생시키기 때문에 복호화 시스템은 고대역폭의 메모리 시스템 및 내부 통신 아키텍처가 필요하다. 이러한 요구사항을 파악하기 위해서 본 논문은 HEVC 복호화기의 메모리 접근 복잡도를 분석한다. 우리는 먼저 임베디드 프로세서와 데스크탑에서 동작하는 소프트웨어 HEVC 복호화기의 메모리 접근량을 측정하였다. 또한 우리는 HEVC 복호화기의 데이터흐름을 분석하여 HEVC 복호화기의 메모리 대역폭 모델을 만들었다. 측정결과, 소프트웨어 복호화기는 6.9~40.5GB/s의 DRAM 접근을 하였다. 또한 분석결과에 따르면 하드웨어 복호화기는 2.4GB/s의 DRAM 대역폭을 요구하는 것으로 파악된다.

• 방송공학회논문지
• /
• 제19권2호
• /
• pp.174-183
• /
• 2014

본 논문에서는 다양한 재생환경에서 적응적으로 홀로그램 비디오를 서비스하기 위한 스케일러블 코딩 방법을 제안한다. 이 방법은 광원정보와 디지털 홀로그램 모두를 스케일러블 부호화 및 복호화에서 사용하는 방법으로, 복원된 영상의 해상도, 즉 영상의 크기를 스케일링하는 해상도-스케일러블 코딩 방법이다. 이 방법은 광원정보와 디지털 홀로그램 각각의 차영상을 압축하는 방식을 사용하고 있으며, 디지털 홀로그램의 차영상은 손실압축, 광원정보의 차영상은 무손실압축 방법으로 압축한다. 제안하는 방법을 실험한 결과 기존의 방법에 비해 압축률 대비 화질이 매우 우수하고, 특히 압축률이 증가할수록 기존방법보다 월등한 성능을 보였다.

• 방송공학회논문지
• /
• 제20권3호
• /
• pp.414-420
• /
• 2015

3차원 영상 시스템에서 깊이 영상은 3차원 콘텐츠를 표현하는데 있어 매우 중요한 역할을 수행한다. 그러나 깊이 카메라로부터 얻은 원본 깊이 영상은 해상도가 색상 영상에 비해 매우 작고 시간적 흐름의 측면에서 관찰하였을 때 깊이 값이 불안정하게 진동하는 깜빡임 문제가 발생한다. 이 문제는 시청자들이 3차원 콘텐츠를 감상할 때 불편한 느낌을 초래한다. 이 논문에서는 원본 깊이 영상의 저해상도 문제를 해결하기 위해 3차원 워핑과 깊이 가중치가 추가된 결합형 양방향 업샘플링 방법을 사용한다. 다음으로 깊이 영상의 배경 영역에서 발생하는 깜빡임 문제를 해결하기 위해 전경과 배경을 분리한 뒤, 전경 영역에는 업샘플링된 깊이 영상을 사용하고 배경 영역에는 시간적 평균값 필터 영상을 이용했다. 실험결과는 제안하는 방법이 시간적 일관성이 향상된 고해상도의 깊이 영상을 생성함을 보였다.

• 한국멀티미디어학회논문지
• /
• 제6권5호
• /
• pp.769-777
• /
• 2003

본 논문에서는 MPEG-1 비디오 스트림이 여러 해상도 수준으로 재생될 수 있도록 디스크 배열에 대한 스트라이핑 기법이 제시된다. MPEG-1 압축 알고리즘에 대한 본 논문의 다단계 엔코딩 기법은 우선 원래의 비디오 스트림을 시간적 차원에서 분할한다. 분할된 서브스트림의 각 프레임은 색상 차원에서 저해상도용 컴포넌트와 잔여 컴포넌트로 다시 분리된다. 멀티미디어 서버는 라운드 로빈 방식으로 서로 다른 컴포넌트의 블록을 디스크에 연속하여 저장한다. 결과적으로 해상도 수준이 낮게 유지될수록 고객에 의해 액세스되는 디스크들의 수가 적어지게 된다. 즉 디스크 배열을 효과적으로 이용하고 동시에 서비스되는 고객들의 수를 최대화하기 위하여 제시된 스트라이핑 기법은 서브스트림의 컴포넌트들을 디스크에 인터리빙하여 저장한다. 제시된 스트라이핑 기법은 서버의 성능을 개선할 수 있으며 이는 시뮬레이션을 통하여 실험적으로 검증되고 분석된다.

• 한국멀티미디어학회논문지
• /
• 제13권1호
• /
• pp.102-110
• /
• 2010

H.264 SVC(Scalable Video Coding)는 디스크 저장 공간 효율성과 높은 확장성을 제공할 수 있는 장점이 있다. 그러나 스트리밍 서버나 단말기는 비트 스트림을 효율적으로 추출해야 한다. 본 논문에서는 네트워크 가용 대역폭을 넘지 않으면서 최대의 PSNR을 얻기 위한 SVC 비트 스트림 추출 기법을 제공한다. 이를 위하여 오프라인시에 최대의 PSNR을 얻기 위한 추출 지점에 대한 정보를 획득한 후, 온라인시에 네트워크 가용 대역폭을 만족하는 비트 스트림의 공간/시간 해상도를 결정한다. 이러한 공간/시간 해상도 정보는 네트워크 가용 대역폭과 함께 비트 스트림 추출기의 입력 파라미터로 사용된다. JSVM 참조 소프트웨어를 활용한 실험을 통하여 본 논문에서 제시한 추출 기법이 높은 PSNR을 제공함을 증명하였다.

• 한국위성정보통신학회논문지
• /
• 제11권2호
• /
• pp.23-28
• /
• 2016

본 논문에서는 ISM(Industry-Science-Medical) 대역의 와이파이-AP(Access Point)의 채널추정에 따라 스마트 미디어의 HDMI(High Definition Multimedia Interface) 해상도를 조정하고자 한다. 2.4/5GHz 대역에서의 채널모델은 RSSI(Received Signal Strength Indication)와 같은 RF특성에 따라 광범위하게 적용할 수 있다. 특별히, 스마트 디바이스의 증가와 무선 랜 공유기(AP)로 인한 동일채널 간섭으로 인한 와이파이의 전송 속도저하와 미디어 스트리밍의 화질저하가 발생된다. 이때 무선채널의 전송속도에 따라 HDMI-CEC(Consumer Electronics Control)를 활용한 동영상 비디오 형식(Video Format Timing)의 최적화를 설계한다. 이로서 스마트 다바이스와 DLNA(Digital Living Network Alliance) 등의 다양한 전송방식(Protocol)에 따라 홈 게이트웨이와 디지털TV 등의 HDMI 해상도를 가변적으로 조절하는 화질유지의 기법 및 PIP 위치설정 방법을 활용할 수 있다.

• 대한전자공학회논문지SD
• /
• 제48권9호
• /
• pp.22-30
• /
• 2011

최근 카메라를 통해 입력된 영상정보로부터 실시간으로 상황을 인지하고 자율 대응할 수 있는 지능형 영상 보안 시스템의 수요가 증가함에 따라, 고성능의 얼굴 인식 시스템이 요구되고 있다. 기존의 얼굴 인식 시스템의 성능 향상을 위해서는 원거리에서 획득된 저해상도 얼굴 영상 처리를 위한 솔루션이 반드시 필요하다. 따라서 본 논문에서는 실시간 감시가 요구되는 지능형 영상 보안 시스템의 얼굴 인식 성능 향상을 위한 저해상도 얼굴 영상 복원 알고리즘을 하드웨어로 구현하였다. 저해상도 얼굴 영상 복원 방법으로는 학습 기반의 초해상도 알고리즘을 사용한다. 해당 알고리즘은 먼저 고해상도 영상으로 구성된 학습 집합에서 주성분 분석(PCA)을 활용하여 복원에 필요한 사전 정보들을 추출하고, 저해상도 영상과의 관계를 모델링하여 가장 적합한 고해상도 얼굴을 복원해내는 것이다. 저해상도 얼굴 영상 복원 알고리즘을 임베디드 프로세서(S3C2440A)를 사용하여 구현하였을 때, 약 25 초의 긴 연산 시간이 소요되었다. 이는 실시간으로 사람을 판별 및 인식하기 위한 지능형 영상 보안 시스템의 구축에는 어려움이 있다. 이를 해결하기 위하여 얼굴 영역 초해상도의 연산을 하드웨어로 구현하고 Xilinx Virtex-4를 이용하여 검증하였다. 약 9MB의 학습 데이터를 사용하였으며, 100 MHz에서 약 30 fps의 속도로 연산이 가능하다. 이러한 학습 기반의 얼굴 영역 초해상도 알고리즘을 단일 하드웨어 IP로 설계함으로써 임베디드 환경에서의 실시간 처리가 가능할 뿐 만 아니라 기존의 다양한 얼굴 검출 시스템과의 통합이 용이하여 얼굴 인식 솔루션을 제공할 수 있을 것으로 판단된다.

• 한국정보통신학회논문지
• /
• 제19권4호
• /
• pp.917-924
• /
• 2015

본 연구에서는 스마트폰을 이용하여 손가락 끝의 혈류의 흐름을 촬영하여 사용자의 맥파 (PPG : Photoplethysmography) 신호를 측정할 때, 카메라 영상 속성에 따른 신호 품질에 대해 연구하였다. 영상 속성은 비트 레이트(Bitrate), 해상도(Resolution), 플래시(Flash)의 조건을 선정하였다. 각 조건에 따라서 변화하는 영상 이미지의 적색(Red)값의 변화를 측정하고 PPG 신호의 추출을 위해 PPI (Pulse to Pulse Interval)를 계산하였다. 실험은 총 20명의 대학생을 대상으로, 세 가지 영상 속성 조건을 조합하여 18가지 태스크로 분류하여 진행되었다. 오른손의 중지에는 PPG 센서를 착용하고 검지에는 스마트폰을 접촉한 상태로, 동시에 2분간 맥박을 측정하여 두 신호의 상관성 분석을 진행하였다. 실험 결과, 영상의 해상도가 $640{\times}480$, 비트레이트 5000kbps, 플래시가 On일 때 가장 높은 상관성(83%, p=0.01)을 나타내는 것을 확인하였다. 본 연구 결과가 앞으로 스마트폰의 카메라를 이용한 맥파 신호 측정 시스템에서 생체신호 품질을 개선하기 위한 유용한 가이드가 될 것으로 기대된다.