• 제목/요약/키워드: 실시간 영상복원

검색결과 124건 처리시간 0.025초

Gabor 코사인과 사인 변환의 기저함수 절단 효과 (Basis Function Truncation Effect of the Gabor Cosine and Sine Transform)

  • 이적식
    • 정보처리학회논문지B
    • /
    • 제11B권3호
    • /
    • pp.303-308
    • /
    • 2004
  • Gabor 코사인과 사인 변환은 영상주파수 성분을 국부적으로 표현하므로 영상과 비디오 압축 알고리즘에 사용될 수 있다. 압축과 복원에 사용되는 순방향과 역방향 행렬 변환식의 계산 복잡도는 O($N^3$)이다. 이 논문에서는 기저함수들의 길이를 절단하여, 희소기저행렬을 생성하고, 영상압축과 복원에 적용하여 실시간 처리에 용이하게 변환 계산량을 감소시키고자 한다. 기저함수 길이가 감소함에 따라서, 기저함수 에너지에 미치는 절단의 영향을 조사하고 다른 여러 측정량의 변화를 살펴본다. 실험 결과로부터 약 1% 이하의 성능저하로 11배의 곱하기/더하기 수를 감소시킬 수 있음을 보았다.

모바일 환경에서의 실시간 블록화 현상 제거를 위한 후처리 기법 (A Post-processing for the Reduction of Blocking Artifact in Mobile Environment)

  • 박대현;유재욱;이강희;김윤
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2008년도 학술대회 논문집 정보 및 제어부문
    • /
    • pp.306-307
    • /
    • 2008
  • 본 논문에서는 제한적인 자원이 할당된 모바일 환경에서 블록기반의 압축방식을 사용하여 영상을 복원할 때에 나타나는 블록화 연상을 제거하기 위해 효율적인 실시간 후처리 기법을 제안한다. 제안하는 후처리 기법은 영상에 존재하는 블록화 현상으로 인해 나타나는 다양한 인공물에 대해 디블록킹 필터링와 방향성 필터링를 적용하여 효율적으로 블록화 현상을 제거한다. 후처리 과정 중 영상에 존재하는 고유의 고주파 성분과 인공물로 인한 고주파 성분을 구분하여, 필더링 과정으로 고유의 고주파 성분이 함께 제거되지 않도록 보호해준다. 다양한 영상을 통해 본 논문에서 제안한 후처리 기법과 기존에 알려진 후처리 기법들을 비교하는 실험을 하였고, 도출된 실험 결과를 객관적인 지표로 제시하여 제안하는 기법의 우수함을 입증하였다.

  • PDF

실내공간의 점진적 복원을 위한 하이브리드 모델 표현 (Hybrid Model Representation for Progressive Indoor Scene Reconstruction)

  • 정진웅;전준호;유대훈;이승용
    • 한국컴퓨터그래픽스학회논문지
    • /
    • 제21권5호
    • /
    • pp.37-44
    • /
    • 2015
  • 본 논문에서는 전통적으로 삼차원 모델 복원에 사용되는 볼륨 기반 자료 구조의 한계점을 극복하기 위해 평면 해시 구조를 볼륨 구조와 상호보완적으로 사용하는 하이브리드 모델 표현을 제안한다. 실내 환경에 대한 삼차원 모델 복원은 좁은 공간에 대한 정밀한 복원 결과를 얻기 위해 볼륨 기반의 자료 구조를 사용하였으나, 이러한 볼륨 기반의 자료 구조는 메모리의 사용량이 많아 대규모 공간에 대한 삼차원 복원으로 확장이 용이하지 못하였다. 본 논문에서는 이러한 기존 삼차원 모델 복원의 확장성을 증가시키기 위해 메모리를 효율적으로 사용하는 평면 해시 모델 구조를 제안한다. 또한 이러한 제안된 평면 해시 모델 구조를 넓고 단순한 평면 복원을 위해 사요하고, 좁고 디테일한 공간 복원에는 기존 볼륨 구조를 동시에 사용하는 하이브리드 복원 방법을 사용한다. 제안된 기법은 GPU 상에서 구현되어 공간을 실시간으로 복원 가능하다.

실시간 영상 초해상도 복원을 위한 효율적인 신경망 구조 연구 (Study of Efficient Network Structure for Real-time Image Super-Resolution)

  • 정우진;한복규;이동석;최병인;문영식
    • 인터넷정보학회논문지
    • /
    • 제19권4호
    • /
    • pp.45-52
    • /
    • 2018
  • 단일 영상 초해상도는 하나의 저해상도 영상에서 고해상도 영상을 복원하는 과정이다. 최근 심층신경망을 적용한 초해상도 기법이 좋은 성과를 나타내고 있다. 본 논문에서는 기존의 심층신경망 기반 초해상도 복원 기법보다 속도와 성능을 개선한 신경망 구조를 제안한다. 이를 위해 기존 기법의 단점을 분석하고 해결책을 제시한다. 제안하는 방법은 기존 기법의 5단계를 3단계로 줄여 효율성을 높였으며, 네트워크의 폭과 깊이에 대한 실험을 통해 가장 효율적인 신경망 구조를 연구하였다. 제안하는 방법의 성능과 속도를 알아보기 위해 비교 실험을 진행하였다. 제안하는 방법은 $1024{\times}1024$ 영상을 초당 148장 복원하는 속도를 나타냈으며, 4가지 데이터에 대해 기존 방법보다 복원 성능이 우수하였다.

SURF 알고리즘 기반 특징점 추출기의 FPGA 설계 (FPGA Design of a SURF-based Feature Extractor)

  • 류재경;이수현;정용진
    • 한국멀티미디어학회논문지
    • /
    • 제14권3호
    • /
    • pp.368-377
    • /
    • 2011
  • 본 논문에서는 특징점 정합을 통한 객체인식, 파노라마 이미지 생성, 3차원 영상 복원 등에 사용될 수 있는 알고리즘 중 대표적인 SURF 알고리즘 기반 특징점 추출기의 하드웨어 구조 설계 및 FPGA 검증 결과에 대해 기술한다. SURF 알고리즘은 크기와 회전변화에 강한 특징점과 서술자를 생성함으로써 객체인식, 파노라마 이미지 생성, 3차원 영상 복원 등에 활용될 수 있다. 하지만 ARMl1(667Mhz) 프로세서와 128Mbytes의 DDR 메모리를 사용하는 임베디드 환경에서 실험결과 VGA($640{\times}480$) 해상도 C영상의 특정점 추출 처리 시약 7,200msec의 시간이 걸려 실시간 동작이 불가능한 것으로 파악되었다. 본 논문에서는 SURF 알고리즘의 핵심 요소인 적분 이미지 메모리 접근 패턴을 분석하여 메모리 접근 횟수와 메모리 사용량을 줄이는 방법을 이용해 실시간 동작이 가능하도록 하드웨어로 설계하였다. 설계된 하드웨어를 Xilinx(社)의 Vertex-5 FPGA 를 이용하여 검증한 결과 l00Mhz 클록에서 VGA 영상의 특징점 추출시 약 60frame/sec로 동작하여 실시간 응용으로 충분함을 알 수 있다.

적응적 시차 추정기법을 이용한 웹 기반의 원격 다시점 3D 화상 통신 시스템의 구현 (Implementation of Web-based Remote Multi-View 3D Imaging Communication System Using Adaptive Disparity Estimation Scheme)

  • 고정환;김은수
    • 한국통신학회논문지
    • /
    • 제31권1C호
    • /
    • pp.55-64
    • /
    • 2006
  • 본 논문에서는 실시간으로 입력되는 스테레오 영상에 효과적인 시차 추정 기법을 적용한 새로운 웹 기반의 원격 다시점 3D 화상 통신 시스템을 구현하였다. 제시된 방법에서는 먼저, IEEE 1394 방식의 스테레오 카메라를 이용하여 자체 설계된 Intel Xeon 서버 시스템을 통해 실시간으로 입력되며, 입력된 스테레오 영상을 중심으로 특징점의 크기에 따라 세밀하면서도 정확한 시차 지도를 검출한 뒤, 검출된 시차지도와 좌 영상을 Directshow SDK를 이용하여 네트워크 채널로 연결된 클라이언트 영역으로 전송하게 된다. 전송된 클라이언트 영역에서는 수신된 시차지도와 좌 영상을 중심으로 정확한 우 영상을 복원한 뒤, 중간시점 합성 기법을 이용하여 16시점의 다시점 입체 화상 통신을 이루게 된다. 각기 다른 상황에서 촬영된 'Joo' 영상과 'Hoon'영상을 웹 기반의 실시간 전송 및 중간영상 합성 실험결과, 본 논문에서 제안된 전송기법으로 우 영상을 복원할 경우 각각 30dB, 27dB의 높은 PSNR이 측정되었으며, 4시점의 8비트 영상을 전송할 경우, 각각 67.2ms의 속도로 디스플레이 함으로써 이를 통한 새로운 실시간 웹 기반의 원격 3D 화상 통신 시스템의 실질적인 구현 가능성을 제시하였다.

H.26X의 화질 보상 방법 연구 (A Study on Video Quality Compensation for H.26X Scheme)

  • 강의선;윤성규;이조원;엄성민;임영환
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2000년도 추계학술발표논문집 (상)
    • /
    • pp.767-770
    • /
    • 2000
  • 저 대역 망에서 동영상을 실시간으로 전송하기 위해서는 높은 압축률을 요구한다. 따라서 복원된 이미지는 화질 저하라는 현상을 낳게 되는데 본 논문에서는 복원 이미지의 화질 보상에 대한 방법으로 디코더에서 블록 아티팩을 제거하고 복원 이미지를 선명하게 하는 알고리즘을 제안한다. 여기서 화질 보상은 원본 이미지와 동일하게 만드는 것이 아니라 인간이 더 좋은 영상으로 인식하도록 하는 걸 목적으로 한다.

  • PDF

Neural Network을 이용한 동영상 장면전환 검출

  • 조승현;장동식
    • 한국경영과학회:학술대회논문집
    • /
    • 대한산업공학회/한국경영과학회 2000년도 춘계공동학술대회 논문집
    • /
    • pp.554-557
    • /
    • 2000
  • 이 논문은 MPEG 비디오 스트림에서 급격하거나 점진적인 장면전환을 검출하는 효과적인 방법을 제안하고 있다. 이 방법에서는 MPEG 압축 영역에서 DC계수를 통해 DC 영상을 복원한 다음 이전 영상과의 그레이레벨 값과의 차이를 구하여 평균값을 가지고 있고 현재 프레임의 그레이 레벨값과 비교하여 임계값이상의 차이가 나면 장면전환이 이루어졌다는 것을 검출하는 알고리즘이다. 을 이용하여 임계값을 구하여 실시간으로 적용함으로 높은 적중률을 가질 수 있게 된다. DC계수는 MPEG에서 가장 많은 정보를 포함하고 있으므로 속도 상승을 위해 AC계수의 값을 계산하지 않는다. 실험결과 고정 임계값을 적용한 다른 방법보다 높은 적중률을 나타났다.

  • PDF

인접전류패턴을 사용한 변형된 방향 대수적 영상복원법 (Modified Directional Algebraic Reconstruction Technique Using Adjacent Current Pattern)

  • 김지훈;김찬용;김경연;최봉열
    • 전자공학회논문지
    • /
    • 제49권12호
    • /
    • pp.256-264
    • /
    • 2012
  • 전기 임피던스 단층촬영법(electrical impedance tomography, EIT)에서 관심 대상물 내부 영상을 복원하는 방법 중 하나인 방향 대수적 영상복원법(directional algebraic reconstruction technique, DART)은 삼각함수형태로 설계된 전류패턴을 외부 전극에 인가하고 이로부터 얻어지는 전압과의 상관관계를 이용하여 영상복원 알고리즘의 입력인 각 전극사이의 저항을 유도하게 된다. 이때, 저항유도 시간이 발생하고 이는 DART 알고리즘을 실시간 영상복원에 적용하는데 장애가 되고 있다. 이 논문에서는 저항유도 시간의 문제를 해결하기 위하여 기존에 사용하던 삼각함수형태의 전류패턴대신 인접전류패턴을 사용한 변형된 방향 대수적 영상복원법(modified directional algebraic reconstruction technique, mDART)을 제안한다. 제안한 방법은 주입한 전류와 측정된 전압으로부터 저항을 유도하지 않고 측정전압을 바로 복원 알고리즘의 입력으로 사용하기 때문에 DART의 영상복원시간의 대부분을 차지하는 저항유도 시간을 없앨 수 있을 뿐만 아니라 인접전류패턴을 사용하여 복원영상의 질도 향상시킬 수 있다. 이 논문의 타당성을 입증하기 위하여 모의실험을 수행하였으며 제안한 방법은 기존 방법보다 복원시간의 개선뿐만 아니라 영상오차 관점에서도 성능이 개선됨을 확인하였다.

3차원 배우 모델링을 위한 깊이 영상의 손실된 머리카락 영역 복원 (Reconstruction of the Lost Hair Depth for 3D Human Actor Modeling)

  • 조지호;장인엽;이관행
    • 한국HCI학회논문지
    • /
    • 제2권2호
    • /
    • pp.1-9
    • /
    • 2007
  • 본 논문에서는 3차원 배우 모델링을 위해, 깊이 카메라를 이용하여 깊이 영상 획득 시 손실되는 머리카락 영역에 대한 복원기법을 제안한다. 대상 객체의 동적인 3차원 정보는 적외선 센서가 장착된 깊이 카메라를 통하여 실시간으로 획득한다. 이때, 깊이 비디오뿐만 아니라 각 프레임마다 컬러영상이 동시에 획득된다. 그러나 대상 객체의 일부 또는 전체가 반짝이면서 어두운 재질로 되어있을 경우 획득한 깊이 영상에서 그 부분 전체가 손실되는데, 이는 특히 방송용 콘텐츠로서 연기자의 3차원 정보를 획득할 때 머리카락 영역이 손실되어 매우 부자연스러운 결과를 초래한다. 이러한 문제점을 손실된 영역의 복원을 통해 해결한다. 먼저 컬러 영상을 이용하여 손실된 영역의 위치 정보를 알아내고, 손실된 영역 내 경계부분의 깊이 정보를 복원한 후 2차 베지어 커브로 보간하여 내부의 깊이 정보를 복원한다. 개선된 깊이 영상을 기반으로 일련의 모델링 과정을 수행하면 보다 자연스러운 3차원 모델을 생성할 수 있다. 생성된 3차원 모델은 실감방송용 콘텐츠로 사용될 수 있으며, 시청자에게 시각상호작용과 촉각상호작용 등 다차원 감각의 상호작용을 제공할 수 있다.

  • PDF