• 제목/요약/키워드: 집계

검색결과 756건 처리시간 0.031초

맵리듀스에서 집계 질의 스트림의 효율적인 처리 기법 (Efficient Processing of an Aggregate Query Stream in MapReduce)

  • 최현진;이기용
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2013년도 추계학술발표대회
    • /
    • pp.1207-1210
    • /
    • 2013
  • 최근 들어 맵리듀스는 빅데이터 처리의 표준 기술로 자리잡고 있다. 빅데이터 분석에 널리 쓰이는 질의 중 하나는 집계(aggregate) 질의이다. 본 논문에서는 서로 다른 집계 질의가 계속적으로 요청되는 환경에서, 맵리듀스를 사용하여 이들 질의를 효율적으로 처리하는 방법을 제안한다. 제안 방법은 여러 집계 질의를 하나의 효율적인 맵리듀스 잡(job)으로 묶어 일괄 처리함으로써, 단순 방법에 비해 시간당 처리되는 질의 수를 크게 증가시킨다. 성능 평가를 통해, 제안 방법은 단순 방법에 비해 처리 성능을 크게 향상시킴을 확인하였다.

무선 센서 네트워크 미들웨어에서의 레벨-기반 데이터 집계 질의 동기화 기법 (A Level-based Data Aggregation Query Synchronization Method for Wireless Sensor Network Middleware)

  • 홍승태;나소라;윤민;장재우
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2009년도 추계학술발표대회
    • /
    • pp.203-204
    • /
    • 2009
  • 최근 무선 센서 네트워크(Wireless Sensor Network)에 대한 관심이 증대되고 있으며, 센서노드의 제한된 에너지를 효율적으로 사용하기 위한 센서 네트워크 미들웨어에 대한 연구가 활발히 수행되어 왔다. 그러나 기존 연구들은 데이터 집계 질의 수행 시 각 센서 노드의 동기화를 라우팅 프로토콜에 의존하고 있으며, 미들웨어에서의 자체적인 동기화 기법에 대한 연구는 미흡한 실정이다. 따라서 본 논문에서는 센서 네트워크 미들웨어 자체적으로 데이터 집계 질의 동기화를 지원하는 레벨-기반 데이터 집계 질의 동기화 기법을 설계한다.

플루토늄 집계자료 발표

  • 한국원자력산업회의
    • 원자력산업
    • /
    • 제8권3호통권61호
    • /
    • pp.92-93
    • /
    • 1988
  • 영국에너지성은 영국의 민간 원자력발전소의 플루토늄생산량, Sellafield 플랜트의 사용후핵연료의 재처리량 및 민간소유 플루토늄의 재고량에 관한 집계를 발표했는데 이렇게 자세한 자료가 공개되기는 이번이 처음이며, 이는 영국정부가 민간원자력산업계에 대해 그 실태를 공개하도록 권장한데서 온 결과이다.

  • PDF

센서 네트워크에서 집계연산을 위한 적응적 필터링 (Adaptive Filtering for Aggregation in Sensor Networks)

  • 박노준;현동준;김명호
    • 한국정보과학회논문지:데이타베이스
    • /
    • 제32권4호
    • /
    • pp.372-382
    • /
    • 2005
  • 각 센서들이 측정한 데이타의 평균값 등을 구하는 집계연산은 센서 네트워크에서 자주 사용되는 응용이다. 센서 네트워크를 구성하는 센서는 작은 배터리로 작동되기 때문에 센서의 에너지 소모를 줄이는 것은 센서 네트워크의 중요한 문제이다. 센서의 에너지 소모를 줄이기 위한 가장 중요한 요소는 전송되는 메시지 수를 줄이는 것인데, 네트워크 내 집계연산과 데이타 필터링이 집계연산 시 전송되는 메시지 수를 줄이기 위한 효과적인 방법이라고 알려져 있다 네트워크 내 집계연산과 데이타 필터링을 동시에 수행하면 더 많은 메시지글 줄일 수 있으며, 최근에 이 방법을 근간으로 한 연구가 있었다. 본 논문에서는, 기존의 데이타 필터링 방법보다 더 효율적이고 효과적인 방법을 제안한다. 본 논문에서 제안하는 방법은 센서 노드의 자기 조정에 기반하고 있기 때문에 더 쉽고 간단하다. 다양한 실험을 통해서, 본 논문에서 제안하는 방법이 다른 방법들보다 더 많은 메시지를 줄이는 것을 확인하였다.

큐브리드 샤드 분산 데이터베이스에서 집계/분석 함수의 분산 처리 시스템 개발 (Distributed Processing System for Aggregate/Analytical Functions on CUBRID Shard Distributed Databases)

  • 원지섭;강석;조선화;김진호
    • 정보과학회 컴퓨팅의 실제 논문지
    • /
    • 제21권8호
    • /
    • pp.537-542
    • /
    • 2015
  • 대용량의 테이블을 수평적으로 분할하여 서로 다른 데이터베이스에 저장함으로써 데이터를 분산 저장하고 처리할 수 있는 방법을 샤딩이라 한다. 샤딩된 데이터에 대한 집계 또는 분석 함수를 적용하여 전체 결과를 얻기 위해서는 여러 곳으로 분산된 데이터에 대한 지역 결과를 통합하는 과정이 필요하다. 본 논문에서는 오픈 소스 DBMS의 하나인 큐브리드(CUBRID)의 샤딩 기술을 이용하여 분산된 부분 집계함수를 통합 처리하는 모듈을 설계하고 구현하는 방법에 대해 소개한다. 이 통합 모듈을 통해 여러 곳으로 샤딩된 데이터에 대하여 집계 및 분석 함수를 이용한 분석이 가능하도록 하였고, 단일 데이터베이스를 사용한 분석 성능과의 비교를 통해 샤드 분산 데이터베이스를 사용한 집계 계산이 효율적임을 보인다.

전국호환 교통카드 이용정보의 유통관리를 위한 호환 교통정보집계시스템 구축 (To Manage Use-Data of Nation-wide Transportation Card, Interoperable Traffic Information Collection System Development)

  • 한호현;이기한;김혜현;김태희;맹재환;박하나
    • 한국ITS학회 논문지
    • /
    • 제9권6호
    • /
    • pp.1-12
    • /
    • 2010
  • 대중교통 정책 수립에 반영하기 위하여 실시하는 기존 대중교통 관련 이용실태 조사는 설문조사자가 대중교통 이용자를 대상으로 직접조사를 하거나, 특정 교통카드 사업자의 카드 사용 내역 중 특정일에 대한 데이터를 기준으로 분석하여 진행하기 때문에 많은 문제가 있었다. 이를 해결하기 위하여 본 논문에서는 전국호환 교통카드 시스템의 전국호환 교통카드 이용자료를 체계적이고 효율적으로 수집하고, 정확하게 집계하며, 간편한 조회를 가능하게 하는 호환 교통정보집계시스템을 개발하였다. 이 호환 교통정보집계시스템은 교통카드 이용자료를 수집 및 집계하는 연계서버와 이를 저장하는 DB서버 그리고 필요한 정보를 조회할 수 있는 조회 단말로 구성된다. 이렇게 개발한 호환 교통정보집계시스템을 검증하기 위해 금융결제원, 코레일네트웍스, 하이플러스카드가 개발하는 전국호환 교통카드 시스템과 연계하여 테스트베드를 운행하여 성공적으로 마쳤다. 이로써 호환 교통정보집계시스템은 체계적인 정보 수집 및 집계 기능과 정확하고 간편한 조회가 가능함을 증명하였다. 따라서 대중교통정책 수립 시 보다 신뢰성 있는 정보의 효율적인 반영을 기대할 수 있다.

주요 단기소득 임산물의 전환비율에 관한 연구 (A study on the Transition Ratios Between types of Main Non-timber Products)

  • 이상민;강갑수;손철호
    • 한국산림과학회지
    • /
    • 제95권3호
    • /
    • pp.342-349
    • /
    • 2006
  • 임산물 생산통계 조사요령은 생산자 판매시점에서 품목별 특정 형태를 기준으로 하여 집계하도록 하고 있다. 그러나 현실적으로 생산자 판매형태와 조사기준 형태가 상이하므로 기준형태로 통일하여 집계하기 위해서는 전환비율이 반드시 필요하나, 현재로서는 그 비율이 제시되지 않아 통계자료의 신뢰성을 떨어뜨리는 요인으로 작용하고 있다. 따라서 정확한 전환비율을 찾아내고 적용하여 좀 더 현실에 가까운 생산통계를 작성하는 것은 임산물 생산통계 집계에 있어 매우 시급한 문제로 인식되고 있다. 이 연구는 전환비율을 적용할 필요가 있는 주요 단기소득 임산물을 대상으로 통계집계 실태를 파악하고, 실험을 통해 산출된 전환비율을 적용하여 개선된 임산물 생산통계 집계체제를 갖출 수 있도록 하는 데 목적이 있다. 대상이 되는 10개의 품목을 선정하여 분석한 결과 실제로 집계현장에서 경험을 통해 파악하고 있는 고사리, 취나물, 대추, 오미자 등의 건조율은 실험을 통하여 산출된 수치와 크게 차이가 나지 않다는 것을 알 수 있으나, 이러한 건조율 수치가 생산동계 집계에 직접 반영되지 않는다는 문제점이 있다. 실험을 통하여 제시된 건조율과 가공율을 이용하여 2004년에 집계된 조사대상품목의 생산량을 새롭게 계산해보면 품목의 생산량이 -41%에서 474%까지 변화하는 것으로 나타났다. 그러나 이 연구에서 제시하고 있는 전환비율은 한 해의 자료에 불과하므로 정확한 비율산출을 위해 장기적인 검증과정을 거쳐야 할 필요가 있다.

06년 3분기 세계휴대폰 시장 '2억4500만대'

  • 김종율
    • 정보화사회
    • /
    • 통권183호
    • /
    • pp.59-61
    • /
    • 2006
  • 2006년 3분기 내수 휴대폰 시장은 440만대 정도 형성된 것으로 잠정 집계 됐다. 업체별로 집계 방식에 따라 약간 다른 수치를 보였지만, 평균 이 정도 시장을 형성한 것으로 관측된다. 이는 1분기 400만대, 2분기 380만대에 비해 약간 성장한 것.

  • PDF

공간적 집계 질의 기능을 가진 직기 관리 사용자 인터페이스의 구현 (Implementing User Interface of Looms Management with Spatial Aggregate Query Functions)

  • 전일수
    • 한국지리정보학회지
    • /
    • 제6권1호
    • /
    • pp.37-47
    • /
    • 2003
  • 본 연구에서는 직기를 윈도우 상에서 컴포넌트로 설계한 후, 데이터베이스 연동 및 다양한 질의가 가능한 사용자 인터페이스를 구현하였다. 구현한 시스템은 마우스로 영역을 선택하여 선택된 컴포넌트들에 대해서만 집계 함수를 처리할 수 있는 질의 기능을 갖추고 있으며, 차트, 피벗 테이블 등 고급 집계 질의도 수행 가능하도록 함으로써, 직기 관리를 위한 의사결정 지원시스템의 역할을 수행할 수 있도록 하였다. 제안한 시스템은 현장 직기에 일시적 혹은 상존하는 문제점 등을 쉽게 파악하고, 그에 따른 적절한 대응을 가능하게 함으로써, 제직 관련업체의 생산성 향상 및 경비 절감을 위해 유용하게 활용될 수 있다.

  • PDF

효율적인 정보 추출을 위한 자료 집계 및 분석 시스템의 설계 및 구현 방안 (System Design for Effective Data Collection and Analysis)

  • 조광현;박희창
    • 한국데이터정보과학회:학술대회논문집
    • /
    • 한국데이터정보과학회 2006년도 PROCEEDINGS OF JOINT CONFERENCEOF KDISS AND KDAS
    • /
    • pp.307-315
    • /
    • 2006
  • 현대 사회에 있어서 신속하고 정확한 정보는 곧 수익증대의 중요한 요소로 자리 잡고 있으며 사회발전이 가속화 될수록 더욱 다양한 정보가 산출되고 있다. 그로인하여 광범위하게 분산되어 있는 정보의 추출은 매우 중요한 부분으로 부각되고 있다. 하지만 기존의 자료 집계 방법은 분산되어 있는 자료를 수집하기 위한 시간이 많이 소요되고 수집된 자료의 확인과정 및 통합 과정 또한 많은 시간이 소요되어 현대의 수많은 정보를 효율적으로 수용하지 못하고 있다. 이에 본 논문에서는 광범위하게 분산되어 있는 자료들에 대하여 효율적인 정보 추출을 제공할 수 있는 자료 집계 및 분석 시스템의 설계 및 구현 방안에 대하여 연구하고자 한다.

  • PDF