• IEIE Transactions on Smart Processing and Computing
• /
• 제4권4호
• /
• pp.281-290
• /
• 2015

Human action recognition from a video scene has remained a challenging problem in the area of computer vision and pattern recognition. The development of the low-cost RGB depth camera (RGB-D) allows new opportunities to solve the problem of human action recognition. In this paper, we present a comprehensive review of recent approaches to human action recognition based on depth maps, skeleton joints, and other hybrid approaches. In particular, we focus on the advantages and limitations of the existing approaches and on future directions.

• 한국안전학회지
• /
• 제26권3호
• /
• pp.29-33
• /
• 2011

Experimental studies were performed to investigate the injury potential of BB pellets through gelatine based simulants. In order to record BB pellet movements penetrating into the target simulant, a high-speed video camera was used. In this study the first investigation involved the effects on concentrations, homogeneity and gelation times of the gelatine simulant. The second investigation involved the penetration depth of the pellets to the simulant by different distances between the BB gun and the simulant. The final one is associated with impact velocity, threshold velocity and penetration depth of the pellets by different kinetic energies of the BB gun. Results provided the basis in assessing the injury potential of BB pellets.

• Current Optics and Photonics
• /
• 제5권1호
• /
• pp.32-39
• /
• 2021

We propose a three-dimensional (3D) streaming system based on a lamina display that can convey field information in real-time by creating floating 3D images that can satisfy the accommodation cue. The proposed system is mainly composed of three parts, namely: a 3D vision camera unit to obtain and provide RGB and depth data in real-time, a 3D image engine unit to realize the 3D volume with a fast response time by using the RGB and depth data, and an optical floating unit to bring the implemented 3D image out of the system and consequently increase the sense of presence. Furthermore, we devise the streaming method required for implementing augmented reality (AR) images by using a multilayered image, and the proposed method for implementing AR 3D video in real-time non-face-to-face communication has been experimentally verified.

• Journal of Information Processing Systems
• /
• 제18권2호
• /
• pp.235-244
• /
• 2022

Many new techniques have been adopted in HEVC (High efficiency video coding) standard, such as quadtree-structured coding unit (CU), prediction unit (PU) partition, 35 intra-mode, and so on. To reduce computational complexity, the paper proposes two optimization algorithms which include fast CU depth range decision and fast PU partition mode decision. Firstly, depth range of CU is predicted according to spatial-temporal correlation. Secondly, we utilize the depth difference between the current CU and CU corresponding to the same position of adjacent frame for PU mode range selection. The number of traversal candidate modes is reduced. The experiment result shows the proposed algorithm obtains a lot of time reducing, and the loss of coding efficiency is inappreciable.

• 방송공학회논문지
• /
• 제17권6호
• /
• pp.964-975
• /
• 2012

본 논문에서는 최근 관심이 고조되고 있는 3차원 입체 비디오 처리 기술의 최종 목표인 디지털 홀로그램을 생성하는데 필요한 객체의 좌표와 색상정보가 들어있는 RGB 영상와 깊이 영상을 획득하여 디지털 홀로그램으로 변환하는 시스템을 제안한다. 먼저, 가시광선과 적외선의 파장을 이용하여 파장에 따라 투과율이 달라지는 콜드 미러를 사용하여 같은 시점을 갖는 RGB와 깊이 영상을 얻는다. 카메라 시스템이 갖는 다양한 왜곡을 없애기 위한 보정과정을 거친 후에 해상도가 서로 틀린 RGB 영상과 깊이 영상의 해상도를 조절한다. 그리고 깊이 정보를 이용하여 디지털 홀로그램으로 구현할 객체를 추출한다. 마지막으로 컴퓨터 생성 홀로그램 (computer-generated hologram, CGH) 알고리즘을 이용하여 추출한 객체를 디지털 홀로그램으로 변환한다. 제안한 시스템의 각 알고리즘은 C/C++/CUDA로 구현하였고, LabView 환경에서 이들을 통합하였다. 고속화를 위하여 홀로그램을 생성하는 것은 범용 그래픽처리유닛(general-purpose computing on graphics processing unit, GPGPU)를 이용하였다. 제안한 시스템을 이용하여 생성한 디지털 홀로그램은 기존의 것보다 더욱 우수한 화질을 가진다는 것을 확인하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 하계학술대회
• /
• pp.4-7
• /
• 2022

최근 다 시점 영상 콘텐츠 기반 3차원 공간(장면) 복원을 위한 다 시점 깊이 추정 딥러닝 네트워크 방법론이 널리 연구되고 있다. 다 시점 영상 콘텐츠는 촬영 구도, 촬영 환경 및 세팅에 따라 다양한 특성을 가지며, 고품질의 3차원 복원을 위해서는 이러한 특성을 이해하고, 적절한 깊이 추정 네트워크 기법들을 적용하는 것이 중요하다. 다 시점 영상 촬영 구도로는 수렴형, 발산형이 존재하며, 촬영 세팅에는 카메라 시점 간 물리적 거리인 baseline이 있다. 본 연구는 이와 같은 다 시점 영상 콘텐츠의 종류와 각 특징에 기반하여 콘텐츠(데이터 셋)의 특성에 따른 적절한 깊이 추정 네트워크 방법론을 다룬다. 실험 결과로부터, 기존의 다 시점 깊이 추정 네트워크를 발산형 또는 large baseline 특성을 가지는 데이터 셋에 곧바로 적용하는데 한계점이 존재함을 확인하였다. 따라서, 각 영상 환경에 적합한 '참조 시점 개수' 및 적절한 '참조 시점 선택 알고리즘'의 필요성을 검증하였다. 결론적으로, 3차원 공간(장면) 복원을 위한 딥러닝 기반 깊이 추정 네트워크 구현 시, 본 연구 결과가 다 시점 영상 콘텐츠 기반 깊이 추정 기법 선택에 있어 가이드라인으로 활용될 수 있음을 확인하였다.

• 한국정보통신학회논문지
• /
• 제18권5호
• /
• pp.1103-1109
• /
• 2014

디지털 영상 처리 분야에서 사람의 동작 인식은 다양하게 연구되고 있으며, 최근에는 깊이 영상을 이용한 방법이 매우 유용하게 사용되고 있다. 하지만 깊이 측정 센서의 위치와 각도에 따라 깊이 영상에서의 객체 크기나 형태가 왜곡되므로 사물 및 사람의 인식 과정에서 인식률이 감소하는 경우가 발생한다. 따라서 뛰어난 성능을 보장하기 위해서는 측정 센서에 의한 왜곡 보정은 반드시 고려되어야 할 사항이다. 본 논문에서는 동작 인식 시스템의 인식률을 향상시키기 위한 전처리 알고리즘을 제안한다. 깊이 측정 센서로부터 입력되는 깊이 정보를 실제 공간 (Real World)으로 변환하여 왜곡 보정을 수행한 후 투영 공간 (Projective World)으로 변환한다. 최종적으로 제안된 시스템을 OpenCV와 Window 프로그램을 사용하여 구현하였으며 Kinect를 사용하여 실시간으로 성능을 테스트하였다. 또한, Verilog-HDL을 사용하여 하드웨어 시스템을 설계하고, Xilinx Zynq-7000 FPGA Board에 탑재하여 검증하였다.

• 방송공학회논문지
• /
• 제21권4호
• /
• pp.578-591
• /
• 2016

본 논문에서는 HEVC 부호화기의 속도를 향상시키기 위하여, 움직임 벡터의 군집화를 통한 코딩 블록의 최대 분할 깊이를 결정하는 방법을 제안한다. 현재 HEVC (High Efficiency Video Coding)의 참조 소프트웨어 HM은 최적의 코딩 블록 구조를 찾기 위해 다양한 코딩 블록의 깊이들에 대한 율-왜곡 최적화 (RDO: Rate-Distortion Optimization)를 수행한다. 하지만 이는 부호화기의 높은 복잡도를 차지하는 요소 중 하나로 보고된다. 본 논문에서는 최적의 코딩 블록 구조를 움직임 벡터의 군집화 된 결과에 따라 결정함으로써, 부호화 과정에서 코딩 블록 구조를 찾기 위한 RDO의 복잡도를 줄임으로써 부호화기의 속도를 향상시키는 방법을 제안한다. 제안하는 방법은 전처리 과정으로부터 원본 영상에 대한 움직임 벡터 계산, 이를 통한 계층적 군집화를 수행하여, 군집화된 경향을 기반으로 코딩 블록의 최대 깊이를 결정한다. 본 논문의 제안하는 방법은 HEVC 참조 소프트웨어 대비 평균 1.45% BD-rate 손실이 있었으며 평균 16%의 부호화 속도 향상을 보였다. 또한, 기존의 고속화 방법과 함께 적용한 경우 1.84% BD-rate 손실과 45.13%의 평균 부호화 속도 향상을 나타냈다.

• 전자공학회논문지
• /
• 제50권5호
• /
• pp.191-198
• /
• 2013

본 논문은 스테레오 동영상에서 깊이 정보와 움직임 정보를 이용하여 좌영상과 우영상이 바뀐 것을 검출하는 기법을 제안한다. 스테레오 정합 기법을 통해 깊이 정보를 얻어 영상을 전경과 배경 영역으로 나누고 움직임 추정 기법을 이용해 움직임 벡터를 얻는다. 제안 기법은 전경이 인접한 배경 쪽으로 움직이거나 배경이 인접한 전경 쪽으로 움직였을 때 가려짐이 발생하는 영역이 배경이라는 것을 이용한다. 그러나 좌영상과 우영상이 바뀐 경우에는 깊이 정보가 반대로 얻어져 전경과 배경 영역도 반대로 얻어지므로 위와 같은 움직임이 있을 경우에 가려짐이 발생하는 영역은 전경이다. 따라서 좌영상과 우영상이 바뀐 것을 검출할 수 있다. 모의실험을 통해 제안 기법이 전경에 의해 배경 영역이 충분히 가려지는 경우 높은 검출률을 보임을 알 수 있다.

• 디지털융복합연구
• /
• 제19권4호
• /
• pp.251-257
• /
• 2021

뉴 미디어의 발전으로 인해 사람들의 정보 습득 방식에 커다란 변화가 생기고 있다. 글이나 사진보다 콘텐츠 내용을 더 입체적인 전달할 수 있는 영상콘텐츠 활용이 그 변화다. 2016년 이후 실시간 라이브 방송 콘텐츠는 제공자와 사용자 모두 증가하는 추세이다. 본 논문은 Youtube Live 또는 DouyuTV를 플렛폼으로 하는 개인의 실시간 라이브 방송 콘텐츠를 연구 대상으로 하였다. 개인의 실시간 라이브 방송 사례에 수록된 디지털화된 정보 내용의 특징 또는 필요성을 분석하였다. 2020년에 코로나19로 인한 온라인 생활의 변화는 실시간 라이브 방송을 더 다양한 분야로 확대될 수 있음을 보여주었다. 디지털 첨단기술을 용합한 실시간 라이브 방송은 내용적인 측면 뿐만 아니라 영상콘텐츠를 소비하는 대중들의 영상 소비 문화에도 다양성을 제공하여 더 많은 사회적 가치를 만들 것으로 예측된다. 그러므로 향후 실시간 라이브 방송콘텐츠의 사회적 책임에 관한 심도 있는 연구가 필요하다고 생각한다.