• Title/Summary/Keyword: 스티칭

Search Result 120, Processing Time 0.026 seconds

Video stitching method maintaining temporal coherence (시간적 일관성을 유지하는 비디오 스티칭 방법)

  • Kim, Kwang-Hwan;Lee, Yun-Gu
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2020.07a
    • /
    • pp.279-281
    • /
    • 2020
  • 본 논문은 고정되지 않고 흔들리는 영상을 각 프레임마다 이미지 스티칭(Image Stitching)으로 비디오를 구성하였을 때 생기는 영상이 심하게 흔들리는 문제 등을 보완하기 위해 새로운 비디오 스티칭(Video Stitching) 방법을 제안한다. NISwGSP 알고 리즘으로 각 프레임 이미지를 스티칭하고 스티칭 형태를 어느 정도 유지시켜주는 새로운 코스트 함수를 도입하여 스티칭 영상의 흔들림 문제를 해결한다. 메쉬(Mesh) 기반 이미지 스티칭 알고리즘인 NISwGSP를 써서 비디오 스티칭을 할 때 메쉬의 버텍스(Vertices)를 이전 프레임의 버텍스로 유지하도록 하여 스티칭 형태를 고정시키는 것이 본 논문에서 제시하는 방법이다.

  • PDF

Luminance-adaptive Image Stitching by Using Deep learning based Feature Detection and Matching (딥러닝 기반 특징점 추출 및 매칭 기술을 활용한 밝기 적응형 영상 스티칭)

  • Kim, Minyoung;Kim, Geonho;Lee, Minseok;Rhee, Seongbae;Kim, Kyuhyeon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2022.06a
    • /
    • pp.847-850
    • /
    • 2022
  • 최근 가상 현실(Virtual Reality), 파노라마(Panorama) 영상 등에 관한 관심과 수요가 증가함에 따라 고해상도 영상을 얻기 위한 영상 스티칭(Image Stitching)에 관한 연구가 활발하게 진행되고 있다. 영상 스티칭은 다수의 영상을 하나의 영상으로 합성해 카메라의 좁은 시야각 문제를 해결함으로써 사용자에게 몰입감과 현장감을 제공할 수 있는 기술이다. 영상 스티칭에 있어 특징점 추출 및 매칭 과정의 정확도는 스티칭 영상의 품질을 결정짓는 핵심적인 요소이지만, 기존의 특징점 추출 및 매칭 방법은 밝기가 어둡고 선명도가 낮은 영상의 스티칭에서 정확도가 저하될 수 있고 생성된 스티칭 영상의 품질 또한 저하될 수 있다는 제한 사항이 있다. 이에 본 논문에서는 앞선 제한적 영상에 대하여 특징점 추출 및 매칭의 정확도를 높여 스티칭 영상의 품질을 높이기 위하여 SuperPoint와 SuperGLUE를 활용한 입력 영상의 밝기 적응형 영상 스티칭 방법을 제안하고자 한다.

  • PDF

Moving Picture Stitching Method Using Homography Matrix & Sensor Data (호모그래피 행렬과 센서 데이터를 활용한 동영상 스티칭 방법)

  • Kim, Minwoo;Lim, Yong-Chul;Kim, Sang-Kyun
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2017.06a
    • /
    • pp.111-114
    • /
    • 2017
  • 본 논문은 동영상 스티칭의 속도 정확도를 향상시키기 위해 호모그래피 행렬 생성과 센서 데이터 활용을 통한 동영상 스티칭 방법을 제안한다. 본 논문에서는 임의의 호모그래피 행렬을 선형으로 생성하여 이미지를 스티칭 하는 방법을 설명하고, 이 과정에서 스티칭 정확도가 낮아지는 단점을 센서 데이터 활용을 통해 보완하는 방법을 소개한다. 1만 쌍의 모든 프레임에서 호모그래피 행렬을 생성 시키는 방법과 본 논문에 제안한 임의의 호모그래피 생성 방법을 비교하였을 때 평균 2.6초 걸리는 스티칭 시간을 약 1.5초 단축시켜 빠른 스티칭을 가능하게 하였다. 또한 선형 호모그래피 행렬만을 사용한 스티칭 한 결과보다 선형 호모그래피 행렬과 센서데이터를 함께 사용하였을 때의 정확도가 28.2% 개선되었음을 확인하였다.

  • PDF

Stitching speed improvement method using YOLACT (YOLACT를 이용한 스티칭 속도 개선 방안)

  • Go, Sung-Young;Rhee, Seong-Bae;Park, Seong-Hwan;Kim, Kyu-Heon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2020.07a
    • /
    • pp.10-13
    • /
    • 2020
  • 최근 초고화질 영상, 가상현실 등 프리미엄 콘텐츠에 대한 요구가 커지면서 360° VR과 8K TV 등의 시장이 확대되고 있다. 360° VR 영상을 만드는 데에 스티칭 기술이 사용되고 있고, 8K 영상을 촬영할 수 있는 장비는 매우 제한적이기 때문에 스티칭 기술을 통해 콘텐츠를 확보하려는 노력이 이어지고 있다. 스티칭 기술은 여러 영상을 합성하여 기존 카메라의 좁은 시야각 문제를 해결하고 보다 넓은 시야각의 영상을 만드는 기술이다. 최근에는 해당 분야에 관한 연구가 진행됨에 따라 이미지를 넘어 동영상 스티칭에 대한 연구가 주로 진행되고 있다, 기존 동영상 스티칭 방식은 이미지 스티칭 방식을 프레임마다 반복하기 때문에 시간이 오래 걸린다는 단점이 있다. 컴퓨터 비전 분야에서는 딥러닝을 활용하여 객체가 존재할 것으로 예측되는 부분에 사각형 모양의 경계 상자(Bounding box)를 생성하는 객체 탐지(Object detection) 분야에 관한 많은 연구가 이루어져 왔고 이를 기반으로 객체의 경계선을 검출하여 해당 영역만을 구분하는 객체 분할(Instance segmentation)에 대한 연구 또한 진행 중이다. 본 논문에서는 앞서 말한 스티칭 속도 문제를 해결하기 위하여 빠른 속도로 객체 분할이 가능한 YOLACT를 이용하여 스티칭 속도를 개선하는 방안을 제안한다.

  • PDF

Efficient Feature Descriptor Extraction and Matching for Fast Image Stitching (효율적인 특징점 기술자 생성을 이용한 빠른 이미지 스티칭 기법)

  • Ahn, Hyochang;Shin, In-Kyung;Park, Sunghyun;Lee, Yong-hwan;Rhee, Sang-Burm
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2012.11a
    • /
    • pp.626-628
    • /
    • 2012
  • 최근 이미지에서 특징점을 추출하고 이를 활용하는 분야로 이미지 스티칭에 대한 연구가 활발하게 진행되고 있다. 이미지 스티칭에서는 특징점을 추출 및 정합이 중요한 요소이다. 본 논문에서는 특징점 기술자의 차원을 효과적으로 감소시켜 정확하면서도 빠르게 정합점을 찾을 수 있는 효율적인 특징점 기술자 생성을 이용한 빠른 이미지 스티칭 기법을 제안한다. 실험 결과, 이미지 스티칭 속도가 기존의 알고리즘 보다 빠르면서도 향상된 스티칭 이미지를 생성할 수 있었다.

Depth-based Image Stitching Using MegaDepth Network (MegaDepth Network를 활용한 깊이 기반 영상 스티칭)

  • Kim, Kahyun;Jang, Hyemin;Choi, Yujin;Rhee, Seongbae;Kim, Kyuheon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2021.06a
    • /
    • pp.275-278
    • /
    • 2021
  • 영상 스티칭은 다수의 영상을 넓은 시야각을 갖는 하나의 영상으로 합성하여 사용자들에게 몰입감과 현장감을 제공하는 기술이다. 그러나 영상에 시차(Parallax)가 존재하는 경우 스티칭된 영상에서 왜곡이 발생할 수 있는데 이는 사용자의 몰입을 방해할 수 있다. 따라서 스티칭 영상의 다양한 활용을 위해서는 시차로 인한 왜곡을 최소화하여 자연스러운 스티칭 영상을 만드는 것이 중요하다. 기존 호모그래피 추정 방법으로 발생할 수 있는 고스트 현상을 최소화하기 위해서 seam 기반 스티칭 방법이 사용되었지만, 단순히 작은 특징값을 따라 생성된 seam은 사물 영역 정보가 반영되지 않아 seam이 특징이 있는 부분을 지나가면서 시차 왜곡이 발생할 수 있다. 이에 본 논문에서는 딥러닝 기반의 MegaDepth를 활용한 depth 예측 정보를 에너지 함수 기반의 seam 생성 행렬의 가중치로 사용하여 seam이 사물을 피해 생성되면서 시차가 작은 영역으로 유도되도록 하는 seam optimization 기법을 제안한다.

  • PDF

Grouping Images Based on Camera Sensor for Efficient Image Stitching (효율적인 영상 스티칭을 위한 카메라 센서 정보 기반 영상 그룹화)

  • Im, Jiheon;Lee, Euisang;Kim, Hoejung;Kim, Kyuheon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2017.06a
    • /
    • pp.256-259
    • /
    • 2017
  • 파노라마 영상은 카메라 시야각의 제한을 극복하여 넓은 시야를 가질 수 있으므로 컴퓨터 비전, 스테레오 카메라 등의 분야에서 효율적으로 연구되고 있다. 파노라마 영상을 생성하기 위해서는 영상 스티칭 기술이 필요하다. 영상 스티칭 기술은 여러 영상에서 추출한 특징점의 디스크립터를 생성하고, 특징점들 간의 유사도를 비교하여 영상들을 이어 붙여 큰 하나의 영상으로 만드는 것이다. 각각의 특징점은 수십 수백차원의 정보를 가지고 있고, 스티칭 할 영상이 많아질수록 데이터 처리 시간이 증가하게 된다. 본 논문에서는 이를 해결 하기 위해서 전처리 과정으로 겹치는 영역이 많을 것이라고 예상되는 영상들을 그룹화 하는 방법을 제안한다. 카메라 센서 정보를 기반으로 영상들을 미리 그룹화 하여 한 번에 스티칭 할 영상의 수를 줄임으로써 데이터 처리 시간을 줄일 수 있다. 후에 계층적으로 스티칭 하여 하나의 큰 파노라마를 만든다. 실험 결과를 통해 제안한 방법이 기존의 스티칭 처리 시간 보다 짧아진 것을 검증하였다.

  • PDF

Impact Behaviors of Stitched Sandwich Composites Under Low Energy Impact Using Drop Weight Impact Tester (고낙하추 충격시험기를 이용한 스티칭된 샌드위치 복합재의 저에너지 충격거동 연구)

  • 윤성호;이상진;조세현
    • Composites Research
    • /
    • v.12 no.5
    • /
    • pp.54-64
    • /
    • 1999
  • This study investigated the impact behaviors of the stitched sandwich composites under the low energy impact by the use of drop weight impact tester. These sandwich composites condidted of the glass fabric faces with a urethane foam core. The upper face and the lower face were stitched to combinr through the core thickness direction using the polyester reinforcements. Four types of the stitched sandwich composites, each having a different core thickness, were tested to determine the effects of the core thickness. The impact conditions were changes with the variations of the mass and drop height of the impact tup. The test results showed that the core thickness and the impact condidtions such as the drop height and the mass of the impact tup affected the impact force, the contact time, and the strain behaviors of the stitched sandwich composites. The stitched sandwich composites are able to avert the damage and also maintain the structural integrity even thouth the presence of the damage owing to the through-the-thickness reinforcements. However, it is important to improve the wetting ability of the stitched reinforcements so that the conventional structures are substituted for the stitched sandwich composites effectively.

  • PDF

360 VR Image Stitching Algorithm using Image Clustering based on Camera Sensor Data (카메라 센서 정보 기반 이미지 클러스터링을 이용한 360 VR 이미지 제작)

  • Jung, Woo-Kyung;Han, Jong-Ki
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2019.11a
    • /
    • pp.73-75
    • /
    • 2019
  • 360°VR 영상은 카메라에서 촬영된 여러 영상들을 이어 붙이는 작업인 스티칭(Stitching)을 통하여 만들 수 있다. 스티칭은 영상들을 이어 붙이기 위해 각 영상의 특징점을 추출하는 특징점 추출, 특징점간 유사도를 비교하여 유사한 특징점끼리 매칭시키는 특징점 매칭, 특징점 매칭 과정에서 획득한 호모그래피 매트릭스를 이용한 이미지 와핑, 각 영상 간의 부자연스러운 경계선을 제거하는 블렌딩 과정을 거친다. 고품질의 360°VR 영상을 획득하기 위해서는 영상의 개수를 증가시킬 필요가 있고, 이로 인해 스티칭 과정에서 소요되는 시간이 증가한다. 본 논문에서는 카메라 센서 정보를 이용해 유사한 영상끼리 클러스터링하여, 한번에 스티칭이 진행되는 영상의 수를 감소시키고, 멀티 스레드를 이용하여 각 그룹의 스티칭을 병렬적으로 진행한 뒤, 최종적으로 스티칭하여 최종 360°VR 영상을 획득하는 과정을 제안한다.

  • PDF

Effect of Stitching Range on Radiation Dose to Eyeball, Thyroid, Breast, Pelvis in Whole Spine Radiography with Standing Position (선 자세 척추 전장 방사선검사 시 스티칭 범위가 장기(수정체, 갑상샘, 유방, 골반부)의 선량에 미치는 영향)

  • Min-Ji, Hong;Han-Yong, Kim;Dong-Hwan, Kim;Young-Cheol, Joo
    • Journal of the Korean Society of Radiology
    • /
    • v.17 no.1
    • /
    • pp.47-52
    • /
    • 2023
  • In whole spine radiography using the stitching technique, overlapping parts occur in the process of synthesizing the three segmented images, so some anatomical structures may be repeatedly exposed, and it has been thought that the dose increases as the scan range increases. However, in the whole spine radiography using the stitching technique in this study, under the condition that the stitching range is taken in the same three splits, the overlapping area decreases as the stitching range increases, so in the case of breasts included in the overlapping range, the dose value decreased by almost half as the stitching range increased from 90 cm to 105 cm. During spinal full-length radiological examination using the stitching method, an appropriately long stitching range could be set to reduce the exposure dose of the breast.