• The Journal of the Korea Contents Association
• /
• v.10 no.12
• /
• pp.18-26
• /
• 2010

In this paper, we propose a method for generating a realistic object panorama by considering geometric transformations of camera views in a general photographing environment. In the proposed method, we first model a trumpet-shape panorama space based on geometric transformations of camera, such as vertical rotation and horizontal rotation movement around a target model. We then generate an object panorama by mapping model images to the trumpet-shape panorama space. To evaluate the performance of the proposed method, experiments were conducted on a large size model, which is quite difficult for us to generate the object panorama without special equipments in general. The experimental results show that the proposed method can effectively generate an object panorama, which is usually generated in a special photographing environment, regardless of the size of target model.

• Journal of the Institute of Electronics Engineers of Korea SP
• /
• v.45 no.3
• /
• pp.55-63
• /
• 2008

This paper presents a panorama background generation and object tracking technique using a Pan-Tilt-Zoom camera. The proposed method estimates local motion vectors rapidly using phase correlation matching at the prespecified multiple local regions, and it makes minimized estimation error by vector quantization. We obtain the required image patches, by estimating the overlapped region using local motion vectors, we can then project the images to cylinder and realign the images to make the panoramic image. The object tracking is performed by extracting object's motion and by separating foreground from input image using background subtraction. The proposed PTZ-based object tracking method can efficiently generated a stable panorama background, which covers up to 360 degree FOV The proposed algorithm is designed for real-time implementation and it can be applied to many commercial applications such as object shape detection and face recognition in various surveillance video systems.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2010.10a
• /
• pp.203-205
• /
• 2010

파노라마 영상을 재구성하는 기존의 방법은 Labeling을 이용하여 객체를 비교한 후에 결합시키는 방법을 적용하였으나 시간이 많이 소요되고 각각의 이미지를 Labeling하는 과정에서 개체 간의 불일치가 발생하여 정확히 영상을 결합할 수 없는 경우가 발생한다. 따라서 본 논문에서는 처리 속도 개선을 위하여 전체 이미지의 1/3만 Labeling한 후에 객체 간을 비교하여 결함시킨다. 그리고 각도가 틀린 경우에는 특징점을 찾아내는 SURF 알고리즘을 적용하여 각각의 이미지에서 Labeling한 사각형의 4개의 포인터에 대해 1개의 중심점을 구하여 Homography를 이용하여 2개의 영상을 자연스럽게 정합한다. 본 논문에서 제안한 파노라마 영상 재구성 방법의 성능을 평가하기 위하여 다양한 이미지를 대상으로 실험한 결과, 기존의 방법보다 영상을 재구성하는데 효과적인 것을 확인하였다. 그리고 처리 속도 측면에서도 개선되었다.

• Journal of the Institute of Electronics Engineers of Korea SP
• /
• v.45 no.6
• /
• pp.108-116
• /
• 2008

In this paper, we propose the algorithm for making panoramic background and object tacking using pan-tilt-zoom camera. We draw an analogy relation between images for cylinder projection, rearrange of images, stitching, and blending. We can then make the panoramic background, and can track the object use the panoramic background. After generated the background, the proposed algorithm tracks the moving object. Therefore it can detect the wide area, and it tracks the object continuously. So the proposed algorithm is able to use at wide area to detect and track the object.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2017.11a
• /
• pp.166-167
• /
• 2017

최근 파노라마 영상과 같이 광각 카메라를 이용하여 인간의 시야각 이상의 범위를 사용자에게 제공하는 영상들을 쉽게 접할 수 있다. 초고해상도를 갖는 파노라마 이미지를 단일 디스플레이에 표출하게 되면 영상의 크기가 축소되고, 모니터 크기의 한정성으로 실감 시청에 불편함을 느끼고 있다. 본 논문에서는 객체 검출(object detection)을 이용한 사용자 위치정보와 관심영역(ROI)를 이용한 영상 제어를 이용하여 이러한 불편함을 느끼는 파노라마 영상을 해결한다. 따라서 사용자는 HMD(Head Mounted Display)와 같은 장치를 착용하지 않고 편리하고 실감 적으로 파노라마 영상을 시청할 수 있으며, 본 논문을 응용한 디스플레이와 상호작용을 통해 다양하고 더욱 실감 적으로 영상을 제어할 수 있는 기대효과를 가진다.

• Journal of the Korea Society of Computer and Information
• /
• v.18 no.4
• /
• pp.13-18
• /
• 2013

Panorama picturing is an elongated photographing technique that connects images with rotating and moving multiple images horizontally that are partly overlapped. However, for hand-operated photographs, it is difficult to adjust overlapped parts because of tilted angles. There has been a study comparing adjacent pictures using labeling technique but it was time-consuming and had angle dissonant cases in nature. In this paper, we propose a less time-consuming paranoiac scene reconstruction method. Our method is also based on labeling-and-comparing technique but uses only 1/3 of it. Then, if there exists angle dissonance, it tries to find characteristic points by SURF algorithm and adjusts them with homography. The efficacy of this method is experimentally verified by experiments using various images

• Proceedings of the Korea Information Processing Society Conference
• /
• 2010.04a
• /
• pp.475-477
• /
• 2010

본 논문에서는 객체 위주의 3D 파노라마를 생성하기 위하여 객체를 중심으로 영상을 촬영할 시, 조명의 위치나 방향에 의해 나타나는 영상 내 음영과 같은 휘도의 차이를 보정하는 방법을 제안한다. 제안하는 방법에서는 먼저 촬영한 영상을 그레이스케일 영상으로 변환한 후, 임계값(threshold)을 기반으로 객체 내 어두운 영역과 밝은 영역을 분류하고, 그레이스케일 영상의 히스토그램을 분석하여 분류한 영역의 차이를 완화시킬 수 있는 최적의 휘도 경계 값을 도출한다. 다음으로는 어두운 영역(shadow)과 밝은 영역(non-shadow)에 해당하는 히스토그램의 요소들을 추출하고, 추출한 요소들을 휘도 경계 값으로 이동하여 조명에 의해 발생된 영사의 휘도 차이를 보정한다. 제안한 방법을 건조물 문화재를 중심으로 촬영한 영상에 적용하였을 시, 조명에 의해 발생된 영상 내 급격한 휘도의 차이를 보정할 수 있었으며, 보정된 결과에서는 보정 전 어두운 영역에서는 관찰하기 어려웠던 건조물 문화재의 내부문양과 같은 정보들을 보다 명확히 확인할 수 있었다.

• Journal of Korea Game Society
• /
• v.18 no.5
• /
• pp.5-14
• /
• 2018

A lot of research has been done on image recognition technique for planar images and the performance has also been improved. However, it is difficult to recognize objects in spherical panoramic images or images in special form which are given in various environments because of the spherical distortion given in different form from the planar case. In this paper, we show that the neural network recognition approach can be used for object recognition in spherical image and suggest a method of using cubemap transform in order to increase recognition accuracy in spherical image.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2019.07a
• /
• pp.317-318
• /
• 2019

가상/증강현실로 대표되는 공간정보 기반 실감형 콘텐츠에 대한 관심이 증대되면서 객체인식 등의 지능형 공간인지 기술에 대한 연구가 활발히 진행되고 있다. 특히 HMD등의 영상 시각화 장치의 발달 및 5G 통신기술의 출현으로 인해 실시간 대용량 영상정보의 송, 수신 및 가시화 처리 기술의 기반이 구축됨에 따라, $360^{\circ}$ 스트리밍 영상정보 처리와 같은 고자유도 콘텐츠를 위한 관련 연구의 필요성이 증대되고 있다. 하지만 지능형 영상정보 처리의 대표적 연구인 딥 러닝(Deep Learning) 기반 객체 인식 기술의 경우 대부분 일반적인 평면 영상(Planar Image)에 대한 처리를 다루고 있고, 파노라마 영상(Panorama Image) 특히, $360^{\circ}$ 스트리밍 영상 처리를 위한 연구는 미비한 상황이다. 본 논문에서는 딥 러닝을 이용하여 $360^{\circ}$ 스트리밍 영상에서의 객체인식 연구 방법에 대해 서술한다. 이를 위해 $360^{\circ}$ 카메라 영상에서 딥 러닝을 위한 학습 데이터를 획득하고, 실시간 객체 인식이 가능한 YOLO(You Only Look Once)기법을 이용하여 학습을 한다. 실험 결과에서는 학습 데이터를 이용하여 $360^{\circ}$영상에서 객체 인식 결과와, 학습 횟수에 따른 객체 인식에 대한 결과를 보여준다.

• Journal of Broadcast Engineering
• /
• v.22 no.6
• /
• pp.713-723
• /
• 2017

Since the panoramic image can overcome the limitation of the viewing angle of the camera and have a wide field of view, it has been studied effectively in the fields of computer vision and stereo camera. In order to generate a panoramic image, stitching images taken by a plurality of general cameras instead of using a wide-angle camera, which is distorted, is widely used because it can reduce image distortion. The image stitching technique creates descriptors of feature points extracted from multiple images, compares the similarities of feature points, and links them together into one image. Each feature point has several hundreds of dimensions of information, and data processing time increases as more images are stitched. In particular, when a panorama is generated on the basis of an image photographed by a plurality of unspecified cameras with respect to an object, the extraction processing time of the overlapping feature points for similar images becomes longer. In this paper, we propose a preprocessing process to efficiently process stitching based on an image obtained from a number of unspecified cameras for one object or environment. In this way, the data processing time can be reduced by pre-grouping images based on camera sensor information and reducing the number of images to be stitched at one time. Later, stitching is done hierarchically to create one large panorama. Through the grouping preprocessing proposed in this paper, we confirmed that the stitching time for a large number of images is greatly reduced by experimental results.