• Journal of Broadcast Engineering
• /
• v.27 no.1
• /
• pp.20-30
• /
• 2022

Recently, as VR (Virtual Reality) technology has been in the spotlight, 360° panoramic images that can view lively VR contents are attracting a lot of attention. Image stitching technology is a major technology for producing 360° panorama images, and many studies are being actively conducted. Typical stitching algorithms are based on feature point-based image stitching. However, conventional feature point-based image stitching methods have a problem that stitching results are intensely affected by feature points. To solve this problem, deep learning-based image stitching technologies have recently been studied, but there are still many problems when there are few overlapping areas between images or large parallax. In addition, there is a limit to complete supervised learning because labeled ground-truth panorama images cannot be obtained in a real environment. Therefore, we produced three fisheye images with different camera centers and corresponding ground truth image through carla simulator that is widely used in the autonomous driving field. We propose image stitching model that creates a 360° panorama image with the produced fisheye image. The final experimental results are virtual datasets configured similar to the actual environment, verifying stitching results that are strong against various environments and large parallax.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2017.11a
• /
• pp.207-209
• /
• 2017

본 논문은 스마트폰 카메라를 사용하여 파노라마 콘텐츠를 제작하기 위한 동영상 스티칭 방법을 제안한다. 본 논문에서는 동영상 스티칭 방법으로 특징점 추출 알고리즘인 SURF와 블렌딩 알고리즘인 멀티밴드 블랜딩 알고리즘을 사용한다. 또한, 동영상 스티칭 결과의 정확도를 향상 시키기 위하여 스마트폰의 센서 데이터를 사용하고, 동영상 스티칭 시 흔들림이 생기는 현상을 해결하기 위하여 선형 호모그래피 행렬 생성 방법을 적용하였다. 추가로 스마트폰을 활용하여 파노라마 콘텐츠 제작 시 요구되어지는 거리와 각도를 찾기 위한 실험을 진행하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2017.11a
• /
• pp.136-138
• /
• 2017

본 논문에서는 동적 프로그래밍 스티칭을 이용하여 다수의 이미지를 경계가 보이지 않게 정합하여 고해상도의 이미지를 얻는 방법을 소개한다. 제안하는 방법에서는 수직, 수평방향으로 일정한 간격으로 쵤영한 다수의 지역 이미지와 전체를 촬영한 전역 이미지를 사용해서 각각의 지역 이미지와 전역 이미지의 특징점을 추출하고 이를 매칭하여 호모그래피를 계산한다. 이를 이용하여 정합할 두 지역 이미지간의 호모그래피를 구하고 좌표를 변환한 후 겹치는 영역에 동적 프로그래밍 스티칭 방법을 적용하여 두 이미지를 정합한다. 동적 프로그래밍 스티칭 방법이란 두 이미지를 정합할 때 겹치는 영역의 차이를 계산하고 차이가 가장 적은 픽셀을 경계로 하는 방법이다. 다수의 이미지를 수직방향으로 정합하고 정합된 이미지들을 수평방향으로 정합하여 하나의 고해상도 이미지를 만들 수 있다. 제안하는 스티칭 기법을 적용함으로써 이미지간의 경계가 드러나지 않을 뿐만 아니라 각 픽셀의 세밀한 정보도 유지한 고해상도의 이미지를 획득할 수 있음을 보였다.

• Journal of Digital Convergence
• /
• v.16 no.2
• /
• pp.335-341
• /
• 2018

This study is a study on effective stitching technique for video recorded by using a dual-lens $360^{\circ}$ camera composed of two fisheye lenses. First of all, this study located a problem in the result of stitching by using a bundled program. And the study was carried out, focusing on looking for a stitching technique more efficient and closer to perfect by comparatively analyzing the results of stitching by using Autopano Video Pro and Autopano Giga, professional stitching program. As a result, it was shown that the problems of bundled program were horizontal and vertical distortion, exposure and color mismatch and unsmooth stitching line. And it was possible to solve the problem of the horizontal and vertical by using Automatic Horizon and Verticals Tool of Autopano Video Pro and Autopano Giga, problem of exposure and color by using Levels, Color and Edit Color Anchors and problem of stitching line by using Mask function. Based on this study, it is to be hoped that $360^{\circ}$ VR video content closer to perfect can be produced by efficient stitching technique for video recorded by using dual-lens $360^{\circ}$ camera in the future.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.11a
• /
• pp.131-132
• /
• 2018

비디오 스티칭은 카메라 간 변환 관계인 호모그래피를 이용하여 스티칭하는 것이 일반적이다. 본 논문은 호모그래피를 이용한 고정형 비디오 스티칭에서 조도 변화, 노이즈 등으로 일관되지 않는 특징점 추출과 유니폼한 입력 영상으로 적은 특징점이 추출되는 경우에 대하여 정확도 높은 호모그래피 추출이 가능한 특징점 누적 기반 고정형 비디오 스티칭 방법을 제안한다. 실험을 통해 단일 프레임 특징점을 이용한 결과 영상에 비해 특징점 누적을 이용하는 경우 영상 내 부정합 영역 등의 왜곡이 크게 감소하였음을 확인하였다.

• The KIPS Transactions:PartB
• /
• v.19B no.2
• /
• pp.93-98
• /
• 2012

Recently, we can easily create high resolution images with digital cameras for high-performance and make use them at variety fields. Especially, the image stitching method which adjusts couple of images has been researched. Image stitching can be used for military purposes such as satellites and reconnaissance aircraft, and computer vision such as medical image and the map. In this paper, we have proposed fast image stitching based on improved SURF algorithm using meaningful features in the process of images matching after extracting features from scenery image. The features are extracted in each image to find out corresponding points. At this time, the meaningful features can be searched by removing the error, such as noise, in extracted features. And these features are used for corresponding points on image matching. The total processing time of image stitching is improved due to the reduced time in searching out corresponding points. In our results, the processing time of feature matching and image stitching is faster than previous algorithms, and also that method can make natural-looking stitched image.

• Korean Journal of Materials Research
• /
• v.2 no.5
• /
• pp.366-374
• /
• 1992

Mechanical and impact properties of stitched S2 glass fiber reinforced polyester woven laminates composites have been studied. Laminates were stitched using Kevlar 49 thread with 1/2, 1, and 2 inch stitch spacing. Tensile and 3-point bending tests haute been performed to evaluate the mechanical properties of stitched and unstitched laminates. Impact tests at applied energy of 234.7J were performed to examine the impact behavior and toughness changes of the specimen. The same specimens were also tested repeatedly at low impact energy level of 110.2J for 3 times to evaluate damage tolerance properties. The tensile and 3-point bending test results showed that one inch spacing specimen had the highest tensile and flexural strength. It also showed the highest energy absorption capability and the best damage tolerance property at the repeated impact test. The half inch spacing specimen showed the lowest tensile strength and energy absorption property at the impact energy level of 234.7J, even though it had the highest frequency of stitching thread.

• Proceedings of the Korean Information Science Society Conference
• /
• 2012.06a
• /
• pp.358-360
• /
• 2012

칩을 분석하기 위해서는 현미경을 이용하여 칩 전체를 타일 형태로 나누어서 사진을 찍어 분석할 한 장의 사진을 완성하게 된다. 본 논문은, 타일형태로 부분 부분 찍은 사진들을 조립하여 한 장의 전체 사진을 완성하는 스티칭 방법에 관한 것이다. 사람이 수작업으로 일일이 사진들을 붙이려면 시간과 정확성이 떨어지므로 스티칭 과정을 자동화하는 방법을 제시한다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2012.06b
• /
• pp.345-347
• /
• 2012

본 논문에서는 4-조각 전립선 병리조직 영상을 기하 보정 및 강체 정합하여 자동 스티칭하는 방법을 제안한다. 4-조각 병리영상에 대하여 총 3번의 스티칭을 수행하는데, 좌, 우 조각영상의 상, 하 영상 간 스티칭을 각각 수행 한 후 좌, 우 조각 영상 간 스티칭을 수행한다. 강체 정합 전 병리 조각의 코너를 이용해 x-축, y-축 방향의 위치보정과 회전보정을 수행하는 기하보정 단계를 거침으로서 지역적 최적해로의 수렴을 방지하며, 강체 정합의 정확성을 높인다. 병리영상은 전체적으로 밝기값이 유사하므로 밝기값이 아닌 외곽선 정보를 이용하여 조각 영상간의 거리를 최소화시켜 강체 정합한다. 실험 결과, 4-조각 전립선 병리조직 영상이 지역적 최적해에 수렴하지 않고, 조각 영상 간 거리를 최소화 하며, 하나로 스티칭 됨을 확인할 수 있었다. 제안 방법의 총 수행 시간은 평균 10.32초로 측정되었다. 본 논문의 제안 방법은 4조각으로 나뉜 전립선 병리조직 영상을 하나로 스티칭 함으로서 해당 조직의 전체 구조 파악 및 조직 내에서의 암의 위치 파악에 사용 될 수 있으며 이를 통한 전립선암의 확진에도 사용 될 수 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2019.06a
• /
• pp.313-316
• /
• 2019

IT기술의 발전으로 다양한 디바이스들이 출현하고 있고, 디바이스들의 디스플레이 크기와 해상도가 증가하는 경향을 보임에 따라 파노라마 영상에 대한 필요성이 대두되고 있다. 현 상황에서 영상 소비 목적과 사용 디바이스에 맞는 영상을 제공하기 위하여 불특정 해상도를 가진 영상들을 정합하여 파노라마 영상을 제작하는 것이 필수적이다. 이와 같은 파노라마 영상을 제작하기 위해서는 영상 간 스티칭 기술이 필요하며, 해당 스티칭 기술은 영상 전체에 대한 정보를 사용하기 때문에 많은 시간이 소요된다. 이러한 문제점을 해결하기 위하여, 스티칭 대상 영역을 특정하는 영상 간 공간유사도 평가를 활용하면 스티칭 시간의 감소를 가져올 수 있다. 본 논문에서는 추출된 특징점을 대상으로 삼각형 닮음 조건을 적용하여 영상 간 공간유사도를 평가하는 알고리즘을 개발하고자 한다.