• 제목/요약/키워드: future video coding

검색결과 34건 처리시간 0.022초

Visual-Attention-Aware Progressive RoI Trick Mode Streaming in Interactive Panoramic Video Service

  • Seok, Joo Myoung;Lee, Yonghun
    • ETRI Journal
    • /
    • 제36권2호
    • /
    • pp.253-263
    • /
    • 2014
  • In the near future, traditional narrow and fixed viewpoint video services will be replaced by high-quality panorama video services. This paper proposes a visual-attention-aware progressive region of interest (RoI) trick mode streaming service (VA-PRTS) that prioritizes video data to transmit according to the visual attention and transmits prioritized video data progressively. VA-PRTS enables the receiver to speed up the time to display without degrading the perceptual quality. For the proposed VA-PRTS, this paper defines a cutoff visual attention metric algorithm to determine the quality of the encoded video slice based on the capability of visual attention and the progressive streaming method based on the priority of RoI video data. Compared to conventional methods, VA-PRTS increases the bitrate saving by over 57% and decreases the interactive delay by over 66%, while maintaining a level of perceptual video quality. The experiment results show that the proposed VA-PRTS improves the quality of the viewer experience for interactive panoramic video streaming services. The development results show that the VA-PRTS has highly practical real-field feasibility.

ETRI AI 실행전략 3: 네트워크 및 미디어·콘텐츠 미래기술 선도 (ETRI AI Strategy #3: Leading Future Technologies of Network, Media, and Content)

  • 김성민;연승준
    • 전자통신동향분석
    • /
    • 제35권7호
    • /
    • pp.23-35
    • /
    • 2020
  • In this paper, we introduce ETRI AI Strategy #3, "Leading Future Technologies of Network, Media, and Content." Its first goal is "to innovate AI service technology to overcome the current limitations of AI technologies." Artificial intelligence (AI) services, such as self-driving cars and robots, are combinations of computing, network, AI algorithms, and other technologies. To develop AI services, we need to develop different types of network, media coding, and content creation technologies. Moreover, AI technologies are adopted in ICT technologies. Self-planning and self-managing networks and automatic content creation technologies using AI are being developed. This paper introduces the two directions of ETRI's ICT technology development plan for AI: ICT for AI and ICT by AI. The area of ICT for AI has only recently begun to develop. ETRI, the ICT leader, hopes to have opportunities for leadership in the second wave of AI services.

HEVC의 계층적 부호화 구조를 고려한 LCU 단위의 비트율 제어 기법 (LCU-Level Rate Control for HEVC Considering Hierarchical Coding Structure)

  • 박동일;김재곤;임성창;김종호;김휘용
    • 방송공학회논문지
    • /
    • 제16권5호
    • /
    • pp.762-772
    • /
    • 2011
  • 본 논문에서는 현재 표준화가 진행중인 HEVC(High Efficiency Video Coding)의 고정 비트율(CBR: Constant Bitrate) 부호화를 위한 비트율 제어(rate control) 기법을 다룬다. 기존의 H.264/AVC의 비트율 제어 기법에서는 계층적 부호화 구조의 특성을 고려하지 못한 제어 기법을 사용하여 정확한 비트율 제어에 어려움이 있다. 현재 HEVC의 참조 소프트웨어인 HM(HEVC test Model)에는 CBR 부호화를 위한 비트율 제어 알고리즘이 제공되지 않은 상태이며, 추후 비트율 제어 모듈이 추가될 것으로 예상된다. 이때 HM의 공통실험조건에 정의된 임의접근(Random Access: RA) 모드의 계층적 부호화 구조에서의 보다 정확한 비트율 제어가 요구된다. 따라서, 본 논문에서는 계층적 부호화 구조에서의 효율적인 비트율 제어를 위해 2차 비트율-왜곡(Rate-Distortion: R-D) 모델 기반의 시간계층 및 프레임 타입에 따른 비트율 특성을 반영한 비트율 제어 기법을 제시한다. 또한, 제어 단위에 따른 비트 변동율과 화질 손실 간에 발생하는 상충관계를 고려하여 비트율 제어 단위를 프레임 단위와 HEVC의 기본 부호화 단위(Coding Unit: CU)로 설정하고 모의실험을 통해 계층적 부호화 구조를 위해 제시된 기법의 비트율 제어 성능을 확인한다.

부호화 정보에 기반한 라이브 비디오의 전송률 결정 (Transmission Rate Decision of Live Video Based on Coding Information)

  • 이명진
    • 한국멀티미디어학회논문지
    • /
    • 제8권9호
    • /
    • pp.1216-1226
    • /
    • 2005
  • 본 논문에서는 동적 대역 할당이 가능한 네트워크에서 라이브 비디오의 고화질 전송을 위한 예방형 전송률 결정 방식을 제안한다. 부호기 앞단의 화면 분석기에서 입력 화면의 분산과 장면전환 정도로부터 향후 화면의 비트율을 예측하고, 부호기와 복호기 버퍼의 제약조건에 의한 전송률 범위를 구한다. 이를 토대로 빈번한 전송률 재협상에 따른 비용 증가 문제를 해결하기 위해 최근 재협상 시점으로부터 경과 시간, 비디오 수신 품질 등을 고려한 예방형 전송률 결정 방식을 제안한다. 모의실험을 통해 제안 방식은 정규화된 Least Mean Square 기반 전송률 결정 방식과 비교되었고, 적은 재협상 비용으로도 지연 위반 화면 없이 높은 채널 이용률 달성이 가능함을 보였다.

  • PDF

Template Matching을 이용한 화면 간 예측에 대한 연구 (A Study of Inter Prediction using Template Matching)

  • 임성원;문주희
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2016년도 하계학술대회
    • /
    • pp.204-206
    • /
    • 2016
  • 본 논문에서는 template matching을 이용한 PMMVD(Pattern Matched Motion Vector Derivation)기술에 대해 움직임 추정 방식에 따라 복잡도를 분석한다. PMMVD 기술은 HEVC의 화면 간 예측 기술과는 다르게 움직임과 관련된 정보를 부호화하지 않으며, 복호화기에서 움직임 벡터를 추정하는 방식이다. 따라서 종래의 기술 대비 높은 효율이 발생하지만 복호화기의 복잡도는 급격히 증가하게 된다. 이러한 이유로 다양한 움직임 추정 방식에 따라 성능을 분석하여 최적의 조합을 찾는 것은 매우 중요한 이슈임을 알 수 있다. 이를 위하여 현재 JVET(Joint Video Exploration Team)에서 FVC(Future Video Coding)를 위해 발표한 참조 소프트웨이인 JEM 2.0(Joint Exploration Test Model 2)을 이용하여 실험을 수행하고 향후 연구 방향을 논의한다.

  • PDF

예비수학교사의 AI 소양과 SW 역량 계발에 관한 사례 연구 (A Case Study on the Pre-service Math Teacher's Development of AI Literacy and SW Competency)

  • 김동화;김승호
    • East Asian mathematical journal
    • /
    • 제39권2호
    • /
    • pp.93-117
    • /
    • 2023
  • The aim of this study is to explore the pre-service math teachers' characteristics of education to develop their AI literacy and SW competency, and to derive some implications. We conducted a 14-hours AI and SW education program for pre-service teachers with theory and practice, and an analysis on class observation data, video frames of classes and interview, Python programming assignments and papers. The results of this case study for 3 pre-service teachers are as follows. First, two students understood artificial neural network and deep learning system accurately, furthermore, all students conducted a couple of explorations related with performance improvement of deep learning system with interest. Second, coding and exploration activities using Python improved students' computational thinking as well as SW competency, which help them give convergence education in the future. Third, they responded positively to the necessity of AI literacy and SW competency development, and to applying coding to math class. Lastly, it's necessary to endeavor to give a coding education to the student's eye level according to his or her prerequisite and to ease the burden of student's studying AI technology.

비균등 오류정정기법의 연구 동향과 표준화 전망 (Unequal Error Protection: Survey and Standardization Prospect)

  • 박기현;남미영;박진수;송홍엽
    • 한국통신학회논문지
    • /
    • 제37C권11호
    • /
    • pp.1054-1063
    • /
    • 2012
  • 본 논문에서는 다계층 브로드캐스트 통신 환경에서 주목받는 비균등 오류정정기법(UEP)에 대하여 기본 이론을 설명하고 그 효과와 응용 분야를 소개한다. 또한 현재까지의 UEP 기술의 연구 동향을 표준 적용 현황과 관련 논문의 소개를 통해 조명하고, 이를 통해 표준화 전망을 비롯한 앞으로의 활용 방안을 제시한다.

비트 스트림 지도를 이용한 고해상도 영상의 효율적인 지역복호화 (Efficient Local Decoding Using Bit Stream Map for High Resolution Video)

  • 박성원;원종우;이선영;김욱중;김규헌;장의선
    • 방송공학회논문지
    • /
    • 제9권4호
    • /
    • pp.391-401
    • /
    • 2004
  • 본 논문은 고해상도 영상 서비스를 위하여 부분 영상의 공간임의접근(Spatial Random Access)을 효과적으로 구현하기 위하여 비트 스트림 지도 (B-map)를 이용한 부호화 방법을 제안한다. 다양한 환경에서, TV 브라운관, 모니터, PDA용 LCD와 같은 표준 디스플레이 장치들은 디지틸 시네마 또는 파노라마 영상과 같은 고해상도 영상을 위한 충분한 해상도와 프레임 크기를 지원하지 못하는 실정이다. 따라서 사용자는 다운샘플링된 저해상도의 영상이나 디스플레이의 크기에 맞춰진 부분 영상만을 볼 수밖에 없다. 제안한 B-map은 부호화 과정에서 생성된 비트 스트림에 대한 블록 단위의 배열 정보를 가지고 있으며, 복호 시 해당 영상의 비트 스트림보다 앞서 보내져 참조됨으로써 효과적인 지역 복호(Local decoding)를 가능하게 한다. B-map을 이용한 방식은 타일링을 비롯한 비교 대안들에 비해 효율적인 지역 복호화를 구현할 수 있음을 실험을 통해 확인하였다.

컴퓨터 프로그래밍과 창의성 발현 활동에 관한 질적 사례 연구: NetLogo 기반의 계산적 사고 중심으로 (A qualitative case study of computer programming and unfolding creative processes: focusing on NetLogo-based computational thinking)

  • 전영국
    • 컴퓨터교육학회논문지
    • /
    • 제18권3호
    • /
    • pp.1-14
    • /
    • 2015
  • 본 논문의 목적은 정보과학영재반 학생들이 계산적 사고의 관점에서 NetLogo 프로그래밍을 하면서 문제를 해결하는 과정의 특성을 살펴보는 데 있다. 이를 위하여 전남 지역의 S대 부속 과학영재교육원에서 실시한 중등정보과학 수업에 관한 강의 자료, 학생들의 프로그래밍 산출물, 소감문을 수집하였고 면담 및 학생 활동을 촬영한 비디오 자료를 추가하였다. 연구자는 NetLogo 프로그래밍 수업 중 다각별 그리기 과제에서 나타나는 학생들의 사고 및 프로그래밍 작업 패턴, 학습태도, 행동특성 등을 분석함으로써 계산적 사고와 관련된 프로그래밍 학습의 특징을 도출하였다. 연구참여자(진우)는 계산적 사고를 해 나가는 과정과 컴퓨터 프로그래밍으로 코딩하는 방식에서 번득이는 아이디어의 순간 포착 및 간결한 코딩 등의 양상을 보여주었다. 사례간의 비교고찰과 해석적 논의를 통해 중등정보과학 영재수업을 담당하는 교육실천가들에게 계산적 사고를 함양시키는 프로그래밍 교수-학습과정에 관한 후속 연구 방향을 제시하였다.

FEF (Future Extension Frame) 다중화 기법을 이용한 지상파 단일 채널 고정 4K UHD & 이동 HD 융합방송 전송시스템 개발에 관한 연구 (A study of Development of Transmission Systems for Terrestrial Single Channel Fixed 4K UHD & Mobile HD Convergence Broadcasting by Employing FEF (Future Extension Frame) Multiplexing Technique)

  • 오종규;원용주;이진섭;김준태
    • 방송공학회논문지
    • /
    • 제20권2호
    • /
    • pp.310-339
    • /
    • 2015
  • UHDTV (Ultra High Definition TV)와 같은 실감의 대용량 방송과 방송망과 통신망을 결합한 융합방송 (Convergence Broadcasting)에 대한 연구가 세계적으로 활발히 진행되고 있다. 최근 DVB (Digital Video Broadcasting) - T2 (2nd Generation Terrestrial) 방송 전송 시스템에 채용된 Multiple-PLP (Physical layer Pipe) 다중화 및 전송 기법들과 최근 표준이 완료된 SHVC (Scalable High efficiency Video Coding) 영상 압축 기술을 채용하여, 지상파 단일 채널을 통해 4K UHD & HD 모바일 방송을 전송하는 전송시스템 개발에 관한 연구가 수행되었다. 하지만 Multiple-PLP 다중화 기법은 서로 다른 계층의 데이터를 각각 다른 채널 부호율과 변조 성상도를 적용하여 하나의 프레임을 통해서 전송할 수 있는 반면, 프레임 내의 OFDM (Orthogonal Frequency Division Multiplexing) 심벌의 크기나 보호구간의 크기는 달리할 수가 없다. 이에 본 논문에서는 다른 계층의 데이터의 FFT & 보호구간의 크기를 달리하여 전송할 수 있는 FEF (Future Extension Frame) 다중화 기법을 이용한 지상파 고정 4K UHD & 이동 HD 융합 방송의 전송 가능성 및 성능을 검증해 보았다. 이를 위해 DVB-T2 지상파 방송 전송 시스템에 채용된 전송 기법들과 FEF 다중화 기법을 적용한 지상파 단일 채널 고정 4K UHD & 이동 HD 융합방송 전송시스템의 구조들을 제안하였다. 이후에는 예측 분석한 SHVC 압축 후의 데이터 전송 요구량을 바탕으로, 제안한 융합방송 전송 시스템을 통해 6 MHz & 8 MHz 대역폭에서 두 계층의 데이터를 전송할 수 있는 최적의 전송 파라메터를 도출하고, 이에 따른 TOV (Threshold of Visibility)를 찾기 위해 AWGN (Additive White Gaussian Noise), 정적 Brazil-D, 그리고 TU (Typical Urban)-6 채널 하에서 수신 성능을 검증해 보았다. 그리고 이를 통해 6MHz 및 8MHz 대역폭에서 4K UHD & HD 계층의 데이터를 고정 수신 그리고 수신 속도가 매우 빠른 이동 환경에서 원활히 수신할 수 있음을 보였다.