• 제목/요약/키워드: intra prediction

검색결과 329건 처리시간 0.03초

다중 모델을 이용한 완전연결 신경망 기반 화면내 예측 (Intra Prediction Using Multiple Models Based on Fully Connected Neural Network)

  • 문기화;박도현;김민재;권형진;김재곤
    • 방송공학회논문지
    • /
    • 제26권6호
    • /
    • pp.758-765
    • /
    • 2021
  • 최근 딥러닝 기술을 비디오 부호화에 적용하는 다양한 연구가 진행되고 있다. 본 논문은 차세대 비디오 코덱인 VVC(Versatile Video Coding)에 채택된 신경망 기반의 기술인 MIP(Matrix-based Intra Prediction)를 확장한 완전연결계층(Fully Connected Layer) 기반의 다중 모델을 이용하는 화면내 예측 부호화 기법을 제시한다. 또한 다중 화면내 예측 모델을 위한 효율적인 학습기법을 제안한다. HEVC(High Efficiency Video Coding)에서의 성능검증을 위해 VVC의 MIP와 제안하는 완전연결계층 기반 다중 화면내 예측 모델을 HEVC의 참조 소프트웨어인 HM16.19에 추가적인 화면내 예측모드로 구현하였다. 실험결과 제안하는 방법이 HM16.19와 VVC MIP 대비 각각 0.47%과 0.19% BD-rate 성능향상이 있음을 확인하였다.

공간 향상 계층에서 효율적인 화면 내 예측 모드 선택 방법 (An Efficient Intra Prediction Mode Decision for Spatial Enhancement Layer)

  • 명진수;박성재;오승준;심동규;김병규
    • 방송공학회논문지
    • /
    • 제12권5호
    • /
    • pp.491-502
    • /
    • 2007
  • 본 논문에서는 H.264/MPEG-4 AVC의 확장표준으로 제정된 SVC(Scalable Video Coding)에서 화면 내 예측 모드를 효율적으로 선택하는 방법을 제안한다. 제안 방법은 공간 향상 계층에서의 화면 내 예측 모드의 통계적 분석을 기반으로 매크로블록의 복잡도 특성에 따라 화면 내 예측 모드를 결정하고 Intra_BL 모드의 RD 값을 사용하여 Intra_BL 모드를 선 결정한다. 실험결과 제안한 방법은 화면 내 예측 모드의 부호화 시간을 54.67% 감소시키는 것에 반해 화질의 열화가 매우 작음을 보였다. 특히 낮은 QP 값에서는 미비한 PSNR의 감소와 약 0.011% 정도의 비트율 증가를 보였고, 높은 QP 값에서는 약 0.01dB 미만의 PSNR 감소와 0.249% 정도의 비트율이 증가하였다.

고화질 비디오 부호화를 위한 새로운 화면내 부호화 방법 (New Intra Coding Scheme for High-definition Video Coding)

  • 허진;호요성
    • 대한전자공학회논문지SP
    • /
    • 제45권5호
    • /
    • pp.72-78
    • /
    • 2008
  • H.264 비디오 부호화 표준 방식은 널리 사용되고 있지만, 고화질 비디오의 해상도에 비해 상대적으로 작은 크기의 매크로블록을 사용하기 때문에 고화질 비디오를 부호화하는데 한계가 있다. 본 논문에서는 고화질 비디오 부호화를 위해 기존의 매크로블록의 크기를 확장하고, 확장된 매크로블록을 기반으로 새로운 화면내 부호화 방법을 제안한다. 휘도 신호의 경우, 기존의 인트라 $4{\times}4$ 예측과 인트라 $16{\times}16$ 예측을 각각 인트라 $8{\times}8$ 예측과 인트라 $32{\times32}$ 예측으로 확장한다. 색차 신호의 경우에는, 인트라 ${8\times}8$ 예측을 인트라 $16{\times}16$ 예측으로 확장한다. 또한 매크로블록의 확장으로 기본 부호화 블록의 크기가 $8{\times}8$로 커짐에 따라, $8{\times}8$ 정수 이산 코사인 변환을 사용한다. 이 논문에서 제안한 방법을 사용하여 고화질 비디오를 부호화 할 경우, 기존의 방법에 비해 약 5.32% 정도 비트수가 감소했으며 약 0.23dB 정도 화질이 개선되었다.

주변 인트라 블록 예측 모드의 통계적 분포를 이용한 효율적인 인트라 4X4 예측 모드 부호화 방법 (Efficient Coding Technique for 4X4 Intra Prediction Modes using the Statistical Distribution of Intra Modes of Adjacent Intra Blocks)

  • 김재민;강현수
    • 한국콘텐츠학회논문지
    • /
    • 제9권4호
    • /
    • pp.12-18
    • /
    • 2009
  • 본 논문은 동영상 압축 표준인 H.264/AVC의 인트라 예측 방법에서 $4{\times}4$ 인트라 예측 모드 정보를 효율적으로 부호화할 수 있는 방법을 제안한다. 인트라 예측 모드에는 $4{\times}4$휘도 블록에 대한 9가지 예측 모드와, $16{\times}16$휘도 블록에 대한 4가지 예측 모드가 존재한다. 각 $4{\times}4$블록에 대한 인트라 모드를 부호화하기 위해서는 많은 비트가 필요하다. H.264/AVC에서는 이웃한 블록의 예측 모드를 이용해서 MPM(Most Probable Mode)을 결정하고 이를 이용해 부호화 효율을 높이는 방법을 사용하고 있다. 본 논문에서는 $4{\times}4$ 인트라 예측 모드 정보를 효율적으로 부호화하기 위해 인접한 블록들에 분포한 예측 모드들의 분포를 이용해 새로운 MPM을 결정하는 방법을 제안한다. 실험 결과 제안된 방법이 기존 방법보다 0.1dB 정도 더 좋은 성능을 보였다.

Separate Scale for Position Dependent Intra Prediction Combination of VVC

  • Yoon, Yong-Uk;Park, Dohyeon;Kim, Jae-Gon
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2019년도 추계학술대회
    • /
    • pp.20-21
    • /
    • 2019
  • The Joint Video Experts Team (JVET) has been working on the development of next generation of video coding standard called Versatile Video Coding (VVC). Position Dependent Intra Prediction Combination (PDPC) which is one of the major tools for intra prediction refines the prediction through a linear combination between the reconstructed samples and the predicted samples according to the sample position. In VVC WD6, nScale which is shift value that adjusts the weight is determined by the width and height of the current block. It may cause that PDPC is applied to regions that do not fit the characteristics of the current intra prediction mode. In this paper, we define nScale for each width and height so that the weight can be applied independently to the left and top reference samples, respectively. Experimental results show that, compared to VTM 6.0, the proposed method gives -0.01%, -0.04% and 0.01% Bjotegaard-Delta (BD)-rate performance, for Y, Cb, and Cr components, respectively, in All-Intra (AI) configuration.

  • PDF

H.264/AVC 디코더용 인트라 예측기의 효율적인 하드웨어 구현 (An Efficient Hardware Architecture of Intra Prediction in H.264/AVC Decoder)

  • 김형호;유기원
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2003년도 신호처리소사이어티 추계학술대회 논문집
    • /
    • pp.91-94
    • /
    • 2003
  • H.264/AVC is the upcoming video coding standard of ITU-T H.264 and ISO MPEG-4 AVC. The new standard can achieve a significant improvement up to 50% in compression ratio compared to MPEG-4 advanced simple profile. In this paper, we propose the novel intra prediction scheme to speed up intra prediction process in H.264/AVC decoder and show the hardware architecture for it. The proposed scheme uses the concurrent processing of the 4$\times$4 intra prediction, which is based on that some 4$\times$4 block pairs in a 16$\times$16 luma block can be processed concurrently. The proposed scheme can reduce intra prediction time by 33 %.

  • PDF

H.264 표준을 위한 효율적인 인트라 예측 모드 결정 방법 (An Efficient Intra Prediction Mode Decision Method for H.264 Standard)

  • 박지윤;이창우
    • 한국통신학회논문지
    • /
    • 제33권10C호
    • /
    • pp.778-786
    • /
    • 2008
  • 가장 최근에 표준화된 H.264 동영상 압축 부호화 기법에서는 많은 새로운 기술들을 적용하여 높은 부호화 성능을 보인다. 특히 최적의 인트라 예측 모드를 결정하기 위해 모든 예측 모드들에 대해 비트율 왜곡 최적(rate distortion optimization) 기법을 적용하기 때문에 많은 계산량을 필요로 한다. 본 논문에서는 분산을 이용하여 인트라 모드를 결정하고 영상의 edge들을 찾아내는 연산을 통해 블록의 방향성을 찾고 그 방향성을 이용하여 인트라 예측 모드 결정에 필요한 계산량을 감소시키는 효율적인 기법을 제안한다.

A FAST INTRA PREDICTION MODE SELECTION METHOD IN H.264/AVC SCALABLE VIDEO CODING

  • Park, Sung-Jae;Lee, Yeo-Song;Sohn, Chae-Bong;Jeong, S.Y.;Chung, Kwang-Sue;Park, Ho-Chong;Ahn, Chang-Bum;Oh, Seoung-Jun
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2009년도 IWAIT
    • /
    • pp.170-173
    • /
    • 2009
  • In this paper, we propose a fast intra prediction mode selection method in Scalable Video Coding(SVC) which is an emerging video coding standard as an extension of H.264/Advanced Video Coding(H.264/AVC). The proposed method decides a candidate intra prediction mode based on the characteristic of macroblock smoothness. Statistical analysis is applied to computing that smoothness in spatial enhancement layer. We also propose an early termination scheme for Intra_BL mode decision where the RD cost value of Intra_BL is utilized. Compared with JSVM software, our scheme can reduce about 55% of the computation complexity of intra prediction on average, while the performance degradation is negligible; For low QP values, the average PSNR loss is very negligible, equivalently the bit rate increases by 0.01%. For high QP values, the average PSNR loss is less than 0.01dB, which equals to 0.25% increase in bitrate on average.

  • PDF

A Fast Intra-Prediction Method in HEVC Using Rate-Distortion Estimation Based on Hadamard Transform

  • Kim, Younhee;Jun, DongSan;Jung, Soon-Heung;Choi, Jin Soo;Kim, Jinwoong
    • ETRI Journal
    • /
    • 제35권2호
    • /
    • pp.270-280
    • /
    • 2013
  • A fast intra-prediction method is proposed for High Efficiency Video Coding (HEVC) using a fast intra-mode decision and fast coding unit (CU) size decision. HEVC supports very sophisticated intra modes and a recursive quadtree-based CU structure. To provide a high coding efficiency, the mode and CU size are selected in a rate-distortion optimized manner. This causes a high computational complexity in the encoder, and, for practical applications, the complexity should be significantly reduced. In this paper, among the many predefined modes, the intra-prediction mode is chosen without rate-distortion optimization processes, instead using the difference between the minimum and second minimum of the rate-distortion cost estimation based on the Hadamard transform. The experiment results show that the proposed method achieves a 49.04% reduction in the intra-prediction time and a 32.74% reduction in the total encoding time with a nearly similar coding performance to that of HEVC test model 2.1.

Error Concealment Using Intra-Mode Information Included in H.264/AVC-Coded Bitstream

  • Kim, Dong-Hyung;Jeong, Se-Yoon;Choi, Jin-Soo;Jeon, Gwang-Gil;Kim, Seung-Jong;Jeong, Je-Chang
    • ETRI Journal
    • /
    • 제30권4호
    • /
    • pp.506-515
    • /
    • 2008
  • The H.264/AVC standard has adopted new coding tools such as intra-prediction, variable block size, motion estimation with quarter-pixel-accuracy, loop filter, and so on. The adoption of these tools enables an H.264/AVC-coded bitstream to have more information than was possible with previous standards. In this paper, we propose an effective spatial error concealment method with low complexity in H.264/AVC intra-frame. From information included in an H.264/AVC-coded bitstream, we use prediction modes of intra-blocks to recover a damaged block. This is because the prediction direction in each prediction mode is highly correlated to the edge direction. We first estimate the edge direction of a damaged block using the prediction modes of the intra-blocks adjacent to a damaged block and classify the area inside the damaged block into edge and flat areas. Our method then recovers pixel values in the edge area using edge-directed interpolation, and recovers pixel values in the flat area using weighted interpolation. Simulation results show that the proposed method yields better video quality than conventional approaches.

  • PDF