정보과학회 컴퓨팅의 실제 논문지 (KIISE Transactions on Computing Practices)

  • 제22권10호
  • /
  • Pages.532-536
  • /
  • 2016
  • /
  • 2383-6318(pISSN)
  • /
  • 2383-6326(eISSN)
한국정보과학회 (Korean Institute of Information Scientists and Engineers)
권호 표지
DOI QR코드

DOI QR Code

프레임율 상향 변환에 부적합한 프레임들에 대한 밝기값 히스토그램과 모션 벡터 상관성 분석

An Analysis of Luminance Histogram and Correlation of Motion Vector for Unsuitable Frames for Frame Rate Up Conversion

  • 투고 : 2016.04.14
  • 심사 : 2016.06.15
  • 발행 : 2016.10.15
⟨ 이전 논문 다음 논문 ⟩

초록

프레임율 상향 변환은 프레임 사이의 시간적 연속성을 고려하여 객체의 움직임을 예측, 이 정보를 토대로 가상의 프레임을 생성하는 기술이다. 프레임율 상향 변환은 양쪽 프레임의 평균값을 취하는 블렌딩 기반의 보간 방법을 사용하기 때문에 오추정된 모션 벡터는 품질이 낮은 보간 프레임들을 생성한다. 따라서, 전처리 혹은 후처리를 통해 품질을 높일 수 있게 하기 위해서, 품질이 낮은 보간 프레임들의 특성을 분석하여야 한다. 본 논문에서는 이런 특성을 파악하기 위해서 밝기값 히스토그램과 모션벡터의 상관성을 분석하였고, 이 피쳐들이 품질이 낮은 보간 프레임을 판단하는 근거가 될 수 있음을 밝기값 히스토그램의 카이제곱 검정방법과 모션 벡터의 공분산 차이의 절대값에 대한 실험 및 분석을 통해 파악하였다.

Frame Rate Up Conversion (FRUC) generate interpolated frames between existing frames using motion estimation and motion compensation interpolation considering temporal redundancy. Falsely-estimated FRUC, however, can generate poor quality frames because FRUC typically uses blending-based interpolation method. As skipping an interpolating process between frames generate mis-estimated motion vectors, could improve Quality of Services of FRUC. In this Paper we analyze luminance histogram and motion vector consistency in frames generating poor quality interpolated frames. We conclude these features could help to be a clue in classifying the frames, which often result in the poor quality of FRUC results through the analysis and experiment.

키워드

과제정보

연구 과제번호 : 퍼스널 미디어가 연결공유결합하여 재구성 가능케 하는 복합 모달리티 기반 미디어 응용 프레임워크 개발

연구 과제 주관 기관 : 정보통신기술진흥센터

참고문헌

  1. J. Nang, S. Kim, and H. Lee, "Classifying Useful Motion Vectors for Efficient Frame Rate Up Conversion of MC-DCT Encoded Video Streams," Journal of Information Science and Engineering, Vol. 30, No. 06, pp. 1755-1771, 2014.
  2. D. Wang, A. Vincent, P. Blanchfield, and R. Klepko, "Motion Compensated Frame Rate Up-Conversion-Part II: New Algorithms for Frame Interpolation," IEEE Transactions on Broadcasting, Vol. 56, No. 02, pp. 142-149, 2010. https://doi.org/10.1109/TBC.2010.2043895
  3. D. Mahajan, F.C. Huang, W. Matusik, and R. Ramamoorthi, "Moving Gradients: a Path-based for Plausible Image Interpolation," ACM Transactions on Graphics, Vol. 28, No. 03, Article 42, 2009.
  4. S. Kim, D. Oh and J. Nang, "A New Path Based Interpolation using Object Motion for Frame Rate Up Conversion," Proc. on International Conference on Consumer Electronics-Berlin 2015, pp. 108-112, 2015.
  5. U. Kim and M. Sunwoo, "New Frame Rate Up-Conversion Algorithm with Low Computational Complexity," IEEE Transactions on Circuits and Systems for Video Technology, Vol. 24, No. 3, pp. 384-393, 2014. https://doi.org/10.1109/TCSVT.2013.2278142
  6. M. Balakhnin, MVTools2. [Online]. Available: http://avisynth.org.ru/mvtools/mvtools2.html [2016. March 31].
  7. S. Kim, H. Hong, J. Nang, "A Gradual Shot Change Detection using Combination of Luminance and Motion Features for Frame Rate Up Conversion," Proc. On 2015 11th International Conference on Signal Image Technology & Internet-based Systems, pp. 295-299, 2015.