• 제목/요약/키워드: Image-to-Image translation

검색결과 303건 처리시간 0.026초

18F-FDG PET 지연영상 생성에 대한 딥러닝 이미지 생성 방법론 비교 (Comparison of Paired and Unpaired Image-to-image Translation for 18F-FDG Delayed PET Generation)

  • 알마슬라마니 모아스;김강산;변병현;우상근
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2023년도 제68차 하계학술대회논문집 31권2호
    • /
    • pp.179-181
    • /
    • 2023
  • 본 논문에서는 GAN 기반의 영상 생성 방법론을 이용해 delayed PET 영상을 생성하는 연구를 수행하였다. PET은 양전자를 방출하는 방사성 동위원소를 표지한 방사성의약품의 체내 분포를 시각화함으로서 암 세포 진단에 이용되는 의료영상 기법이다. 하지만 PET의 스캔 과정에서 방사성의약품이 체내에 분포하는 데에 걸리는 시간이 오래 걸린다는 문제점이 존재한다. 따라서 본 연구에서는 방사성의약품이 충분히 분포되지 않은 상태에서 얻은 PET 영상을 통해 목표로 하는 충분히 시간이 지난 후에 얻은 PET 영상을 생성하는 모델을 GAN (generative adversarial network)에 기반한 image-to-image translation(I2I)를 통해 수행했다. 특히, 생성 전후의 영상 간의 영상 쌍을 고려한 paired I2I인 Pix2pix와 이를 고려하지 않은 unpaired I2I인 CycleGAN 두 가지의 방법론을 비교하였다. 연구 결과, Pix2pix에 기반해 생성한 delayed PET 영상이 CycleGAN을 통해 생성한 영상에 비해 영상 품질이 좋음을 확인했으며, 또한 실제 획득한 ground-truth delayed PET 영상과의 유사도 또한 더 높음을 확인할 수 있었다. 결과적으로, 딥러닝에 기반해 early PET을 통해 delayed PET을 생성할 수 있었으며, paired I2I를 적용할 경우 보다 높은 성능을 기대할 수 있었다. 이를 통해 PET 영상 획득 과정에서 방사성의약품의 체내 분포에 소요되는 시간을 딥러닝 모델을 통해 줄여 PET 이미징 과정의 시간적 비용을 절감하는 데에 크게 기여할 수 있을 것으로 기대된다.

  • PDF

Image-to-Image Translation with GAN for Synthetic Data Augmentation in Plant Disease Datasets

  • Nazki, Haseeb;Lee, Jaehwan;Yoon, Sook;Park, Dong Sun
    • 스마트미디어저널
    • /
    • 제8권2호
    • /
    • pp.46-57
    • /
    • 2019
  • In recent research, deep learning-based methods have achieved state-of-the-art performance in various computer vision tasks. However, these methods are commonly supervised, and require huge amounts of annotated data to train. Acquisition of data demands an additional costly effort, particularly for the tasks where it becomes challenging to obtain large amounts of data considering the time constraints and the requirement of professional human diligence. In this paper, we present a data level synthetic sampling solution to learn from small and imbalanced data sets using Generative Adversarial Networks (GANs). The reason for using GANs are the challenges posed in various fields to manage with the small datasets and fluctuating amounts of samples per class. As a result, we present an approach that can improve learning with respect to data distributions, reducing the partiality introduced by class imbalance and hence shifting the classification decision boundary towards more accurate results. Our novel method is demonstrated on a small dataset of 2789 tomato plant disease images, highly corrupted with class imbalance in 9 disease categories. Moreover, we evaluate our results in terms of different metrics and compare the quality of these results for distinct classes.

개선된 chain code와 HMM을 이용한 내용기반 영상검색 (Content-based Image Retrieval using an Improved Chain Code and Hidden Markov Model)

  • 조완현;이승희;박순영;박종현
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2000년도 제13회 신호처리 합동 학술대회 논문집
    • /
    • pp.375-378
    • /
    • 2000
  • In this paper, we propose a novo] content-based image retrieval system using both Hidden Markov Model(HMM) and an improved chain code. The Gaussian Mixture Model(GMM) is applied to statistically model a color information of the image, and Deterministic Annealing EM(DAEM) algorithm is employed to estimate the parameters of GMM. This result is used to segment the given image. We use an improved chain code, which is invariant to rotation, translation and scale, to extract the feature vectors of the shape for each image in the database. These are stored together in the database with each HMM whose parameters (A, B, $\pi$) are estimated by Baum-Welch algorithm. With respect to feature vector obtained in the same way from the query image, a occurring probability of each image is computed by using the forward algorithm of HMM. We use these probabilities for the image retrieval and present the highest similarity images based on these probabilities.

  • PDF

브랜드아파트 광고이미지의 기호학적 해석을 통한 광고커뮤니케이션의 효율성에 대한 연구 (A Study of the Efficiency of Advertisement Communication through the Semiological Translation for Advertisement Image of Brand Apartment)

  • 장미경;최정윤
    • 디자인학연구
    • /
    • 제19권4호
    • /
    • pp.145-154
    • /
    • 2006
  • 오늘날 브랜드아파트 광고는 유비쿼터스 도입으로 소비자 편리를 추구하는 하이테크 아파트의 이미지와 소비자의 웰빙 라이프를 강조하는 자연친화적 아파트의 이미지가 주류를 이루고 있다. 그러나 일부 브랜드를 제외하고는 광고이미지 표현에 있어서 차별성이 결여되어 있다고 보여진다. 이것은 광고의 궁극적 목적인 효과적인 커뮤니케이션의 제공에 대한 문제와도 관련이 있을 것이다. 따라서 본 연구는 브랜드아파트 광고의 효율적 커뮤니케이션 방안을 제시하기 위하여, 먼저 최근 브랜드 아파트 광고가 제시하고 있는 이미지들을 기호학적으로 해석하고, 이러한 이미지가 소비자에게 적절하게 전달되고 있는지를 검토하기 위하여 디자인 전문가 집단123명을 대상으로 브랜드 아파트 광고에 대한 이미지 조사를 실시하였다. 그 결과 광고 표현의 기호학적 해석에 있어서는 광고 컨셉과 광고 이미지가 기호학적으로 일치하고 있을 때 의미공유가 이루어지고 있으며, 이러한 의미공유로부터 광고주와 소비자 간의 성공적인 광고 커뮤니케이션 실현이 가능한 것으로 나타났다. 본 연구의 결과를 토대로, 광고 기획에 있어서 기호학의 도입은 효율적인 광고 커뮤니케이션의 제공을 위한 논리적인 판단 기준이 될 수 있음을 알 수 있었다.

  • PDF

인간 시각의 MTF에 기반한 견고한 디지털 영상 워터마킹 (Robust Digital Image Watermarking Based on MTF of HVS)

  • 홍수기;조상현;최흥문
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2000년도 하계종합학술대회 논문집(4)
    • /
    • pp.114-117
    • /
    • 2000
  • In this paper, we proposed robust digital image watermarking based on modulation transfer function (MTF) of human visual system (HVS). Using the proposed method, robust watermarking is possible both in common image processing operations such as cropping and lossy compression and in geometrical transforms such as rotation, scaling, and translation, because it can embed watermark and template signal maximally using MTF of HVS. Experimental results show that the proposed watermarking method is more robust to several common image processing operations and geometrical transforms.

  • PDF

CLASSIFIED ELGEN BLOCK: LOCAL FEATURE EXTRACTION AND IMAGE MATCHING ALGORITHM

  • Hochul Shin;Kim, Seong-Dae
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2003년도 하계종합학술대회 논문집 Ⅳ
    • /
    • pp.2108-2111
    • /
    • 2003
  • This paper introduces a new local feature extraction method and image matching method for the localization and classification of targets. Proposed method is based on the block-by-block projection associated with directional pattern of blocks. Each pattern has its own eigen-vertors called as CEBs(Classified Eigen-Blocks). Also proposed block-based image matching method is robust to translation and occlusion. Performance of proposed feature extraction and matching method is verified by the face localization and FLIR-vehicle-image classification test.

  • PDF

JPEG2000기반 검색 알고리즘 개발 (Development to Image Search Algorithm for JPEG2000)

  • 조재훈;김영섭
    • 반도체디스플레이기술학회지
    • /
    • 제6권2호
    • /
    • pp.53-57
    • /
    • 2007
  • In this paper, a new content-based color image retrieval method is proposed, in which both the color content and the spatial relationship of image have been taken into account. In order to represent the spatial distribution information of image, a disorder matrix, which has the invariance to the rotation and translation of the image content, has been designed. This is based on multi-resolution color-spatial information. We present our algorithm in the following section, and then verified the search results with comparison to other methods, such as color histogram, wavelet histogram, correlogram and wavelet correlogram. Experimental results with various types of images show that the proposed method not only achieves a high image retrieval performance but also improve the retrieval precision.

  • PDF

CartoonGAN 알고리즘을 이용한 웹툰(Webtoon) 배경 이미지 생성에 관한 연구 (A Study on Webtoon Background Image Generation Using CartoonGAN Algorithm)

  • 오세규;강주영
    • 한국빅데이터학회지
    • /
    • 제7권1호
    • /
    • pp.173-185
    • /
    • 2022
  • 현재 한국의 웹툰은 세계 디지털 만화 시장을 선도하고 있다. 웹툰은 세계 각국 다양한 언어로 서비스되고 있으며 웹툰의 IP(지식재산권)를 이용해 제작된 드라마와 영화가 크게 흥행하면서 웹툰의 영상화 작업도 점점 많아지고 있다. 그러나 이러한 웹툰의 성공과 함께 웹툰 작가의 노동 환경이 중요한 문제로 떠오르고 있다. 「2021년 만화 이용자 실태조사」에 따르면, 웹툰 작가의 하루 평균 작업시간은 10.5시간이며 일주일 평균 5.9일을 창작활동에 사용한다. 작가들은 매주 많은 분량의 그림을 그려야 하는데, 웹툰 간의 경쟁은 더욱 치열해지고 있으며 회 당 작가가 그려야 할 분량은 점점 늘어가고 있다. 따라서, 이 연구에서는 딥러닝 기술을 이용하여 웹툰 배경 이미지를 생성하고 웹툰 제작에 활용할 것을 제안한다. 웹툰의 주요 인물은 작가의 독창성이 상당 부분 포함되는 영역이지만, 배경 그림은 비교적 반복적이며 독창성이 필요하지 않은 영역이기 때문에, 작가의 작화 스타일과 유사한 배경 그림을 생성할 수 있다면 웹툰 제작에 유용하게 사용될 수 있다. 배경 생성은 image-to-image translation에서 좋은 성능을 보여주고 있는 CycleGAN과 카툰(cartoon) 스타일에 특화된 CartoonGAN을 이용한다. 이러한 생성은 과도한 업무환경에 처한 작가들의 노동 시간을 단축하고 웹툰과 기술의 융합에 기여할 것으로 기대된다.

Affine-Invariant Image normalization for Log-Polar Images using Momentums

  • Son, Young-Ho;You, Bum-Jae;Oh, Sang-Rok;Park, Gwi-Tae
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 2003년도 ICCAS
    • /
    • pp.1140-1145
    • /
    • 2003
  • Image normalization is one of the important areas in pattern recognition. Also, log-polar images are useful in the sense that their image data size is reduced dramatically comparing with conventional images and it is possible to develop faster pattern recognition algorithms. Especially, the log-polar image is very similar with the structure of human eyes. However, there are almost no researches on pattern recognition using the log-polar images while a number of researches on visual tracking have been executed. We propose an image normalization technique of log-polar images using momentums applicable for affine-invariant pattern recognition. We handle basic distortions of an image including translation, rotation, scaling, and skew of a log-polar image. The algorithm is experimented in a PC-based real-time vision system successfully.

  • PDF

Stereoscopic PTV 기법의 개발과 성능비교 연구 (Development of Stereoscopic PTV Technique and Performance Tests)

  • 이상준;윤전환
    • 대한기계학회논문집B
    • /
    • 제30권3호
    • /
    • pp.215-221
    • /
    • 2006
  • A stereoscopic particle tracking velocimetry (SPTV) technique based on the 2-frame hybrid particle tracking velocimetry (PTV) method was developed. The expansion of 2D PTV to SPTV is facilitated by the fact that the PTV method tracks individual particle centroids. To evaluate the performance and measurement accuracy of the present SPTV technique, it was applied to flow images of rigid body translation and synthetic standard images of jet shear flow and impinging jet flow. The data processing routine and measurement uncertainty of the SPTV technique are compared with those of conventional stereoscopic particle image velecimet.y (SPBV). In addition, the centroid translation effect of 2D particle image velocimetry (PIV) is defined and its effect on SPIV measurements is discussed. Compared to the SPIV method, the SPTV technique has inherited merits of concise and precise velocity evaluation procedures and provides better spatial resolution and measurement accuracy.