DOI QR코드

DOI QR Code

대용량 데이터 처리를 위한 질의 컬럼셋과 수평 파티션의 통합 방법

Integrating Query Column-Sets and Horizontal Partitions on Very Large Data

  • 정문영 (전자통신연구원 빅데이터인텔리전스연구부) ;
  • 이태휘 (전자통신연구원 빅데이터인텔리전스연구부) ;
  • 김성수 (전자통신연구원 빅데이터인텔리전스연구부) ;
  • 송혜원 (전자통신연구원 빅데이터인텔리전스연구부) ;
  • 원종호 (전자통신연구원 빅데이터인텔리전스연구부)
  • Chung, Moonyoung (Electronics and Telecommunications Research Institute (ETRI)) ;
  • Lee, Taewhi (Electronics and Telecommunications Research Institute (ETRI)) ;
  • Kim, Sung-Soo (Electronics and Telecommunications Research Institute (ETRI)) ;
  • Song, Hyewon (Electronics and Telecommunications Research Institute (ETRI)) ;
  • Won, Jongho (Electronics and Telecommunications Research Institute (ETRI))
  • 발행 : 2016.10.27

초록

분산된 테이터에 대한 질의 처리에서는 중간 데이터를 전송하는 단계에서 많은 디스크 I/O 및 네트워크 트래픽을 야기할 수 있다. 따라서, 질의에 필요하지 않은 데이터를 미리 필터링하면 불필요한 I/O 및 네트워크 전송을 줄일 수 있어 질의 처리 성능을 높일 수 있다. 이 논문에서는 질의 컬럼셋과 수평 파티션 방법을 통합하여 질의 처리에 불필요한 데이터를 초기 단계에 미리 필터링하여 질의 처리 성능을 높이는 방법을 제안한다.

키워드

과제정보

연구 과제번호 : 듀얼모드 배치-쿼리 분석을 제공하는 빅데이터 플랫폼 핵심 기술 개발

연구 과제 주관 기관 : ETRI