• Title/Summary/Keyword: 데이터웨어하우스

Search Result 294, Processing Time 0.025 seconds

A Study of Column-oriented Storage Method on Harddisks and Flash SSDs (하드디스크와 플래시SSD상에서 열-지향 저장 모델 고찰)

  • Park, Ji-Young;Kang, Woon-Hak;Lee, Sang-Won
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2012.04a
    • /
    • pp.1121-1124
    • /
    • 2012
  • 열-지향 데이터베이스 시스템인 C-Store는 많은 상용 데이터베이스 시스템과는 달리 데이터를 행(row) 위주가 아닌 열(column) 위주로 저장을 하여, 데이터 웨어하우스와 같이 주로 읽기 IO를 유발하는 환경에서 데이터의 전송량을 줄임으로써, 높은 성능을 보였다. 본 논문에서는 대표적인 열 지향 저장 DBMS인 C-Store와 행 위주의 저장구조를 사용하는 기존 DBMS와의 차이점을 알아보고, C-Store의 저장장치로 하드디스크와 차세대 저장장치로 주목받고 있는 플래시 SSD(Solid State Disk)를 사용하였을 때, 발생할 수 있는 장단점에 대해 분석하였다.

Column-aware Transaction Management Scheme for Column-Oriented Databases (컬럼-지향 데이터베이스를 위한 컬럼-인지 트랜잭션 관리 기법)

  • Byun, Si-Woo
    • Journal of Internet Computing and Services
    • /
    • v.15 no.4
    • /
    • pp.125-133
    • /
    • 2014
  • The column-oriented database storage is a very advanced model for large-volume data analysis systems because of its superior I/O performance. Traditional data storages exploit row-oriented storage where the attributes of a record are placed contiguously in hard disk for fast write operations. However, for search-mostly datawarehouse systems, column-oriented storage has become a more proper model because of its superior read performance. Recently, solid state drive using MLC flash memory is largely recognized as the preferred storage media for high-speed data analysis systems. The features of non-volatility, low power consumption, and fast access time for read operations are sufficient grounds to support flash memory as major storage components of modern database servers. However, we need to improve traditional transaction management scheme due to the relatively slow characteristics of column compression and flash operation as compared to RAM memory. In this research, we propose a new scheme called Column-aware Multi-Version Locking (CaMVL) scheme for efficient transaction processing. CaMVL improves transaction performance by using compression lock and multi version reads for efficiently handling slow flash write/erase operation in lock management process. We also propose a simulation model to show the performance of CaMVL. Based on the results of the performance evaluation, we conclude that CaMVL scheme outperforms the traditional scheme.

The Implementation of Smart Raising Environment Management System based on Sensor Network and 3G Telecommunication (센서 네트워크와 3G 통신 기반 스마트 생장환경 관리시스템 개발)

  • Jeong, Kyong-Jin;Kim, Won-Jung
    • The Journal of the Korea institute of electronic communication sciences
    • /
    • v.6 no.4
    • /
    • pp.595-601
    • /
    • 2011
  • This study proposed the system to automatically control the optimized raising environment for vegetation, raised in an equipment house, in which u-IT agricultural technology concept was applied. The system consists of environment sensors such as temperature, humidity, etc., biosensors such as EC, PH, etc., and requested automatic control devices, in which they were automatically controlled by the software system. The system is established in client systems, installed in each equipment house and the server system, collecting data from each client system as well. In addition, the system collects each farmer's data through the Internet and 3G network. In this phase, collected raising environment data comes to be analyzed in order to find out the optimized vegetation raising environment, finally, which is visualized and used for consulting each farmer.

Data Server Mining applied Neural Networks in Distributed Environment (분산 환경에서 신경망을 응용한 데이터 서버 마이닝)

  • 박민기;김귀태;이재완
    • Proceedings of the Korean Institute of Information and Commucation Sciences Conference
    • /
    • 2003.05a
    • /
    • pp.473-476
    • /
    • 2003
  • Nowaday, Internet is doing the role of a large distributed information service tenter and various information and database servers managing it are in distributed network environment. However, the we have several difficulties in deciding the server to disposal input data depending on data properties. In this paper, we designed server mining mechanism and Intellectual data mining system architecture for the best efficiently dealing with input data pattern by using neural network among the various data in distributed environment. As a result, the new input data pattern could be operated after deciding the destination server according to dynamic binding method implemented by neural network. This mechanism can be applied Datawarehous, telecommunication and load pattern analysis, population census analysis and medical data analysis.

  • PDF

SQL Extensions for Handling Spreadsheets and PIVOT tables in OLAP Environment (OLAP 환경에서 스프레드시트와 피벗 테이블을 다루기 위한 SQL의 확장)

  • Shin, Sung-Hyun;Kim, Jin-Ho;Moon, Yang-Sae;Kim, Sang-Wook
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2008.06c
    • /
    • pp.21-25
    • /
    • 2008
  • 온라인 분석 처리(On-Line Analytical Processing: OLAP)은 데이터 웨어하우스로부터 다차원 데이터를 분석하거나 의사 결정을 위한 유용한 정보를 제공하고 있다. 데이터 분석을 위해, OLAP에서는 다차원 데이터를 표현한 스프레드시트(spreadsheet) 또는 피벗 테이블(PIVOT table)을 널리 사용하고 있다. 스프레드시트와 피벗 테이블은 서로 유사한 형태로써 분석의 기준이 되는 애트리뷰트들이 많은 구조이다. 사용자들은 흔히 사용되고 있는 SQL 구문을 이용하여 스프레드시트 또는 피벗 테이블에서 손쉬운 데이터 분석을 요구한다. 그러나, RDBMS에서 제공하는 SQL 구문의 사용으로, 이는 다차원 데이터를 효과적으로 분석할 수 없다. 그 이유는 SQL 구문이 다양한 데이터 분석의 목적으로 사용되거나, 요약된 집계 정보를 도출하는 데 한계가 있기 때문이다. 따라서, 본 연구에서는 SQL 구문을 확장하여 다차원 데이터를 표현한 스프레드시트를 손쉽게 조작하고, 요약된 집계를 계산하는 셀(cell) 구문을 제안한다. 이 방법은 스프레드시트와 피벗 테이블에서 행과 열이 교차하는 좌표(coordinate)를 이용하여, 특정 셀의 조작 및 선택한 부분/전체 영역에 대한 집계 정보를 계산하는 방법이다. 결과적으로, RDBMS에서 사용되는 SQL 구문이 친숙한 사용자들이 제안한 셀 구문을 이용하면, 다양한 관점에 따라 손쉽게 스프레드시트와 피벗 테이블을 다룰 수 있을 것으로 사료된다.

  • PDF

Design of a Forecasting Model for Customer Classification in the Telecommunication Industries (통신 산업의 고객 분류를 위한 예측 모델 설계)

  • Lee Byoung-Yup;Joh Kyu-Ha;Song Seok-Il;Yoo Jae-Soo
    • The Journal of the Korea Contents Association
    • /
    • v.6 no.1
    • /
    • pp.179-189
    • /
    • 2006
  • Recently, according to the development of computer technology, a large amount of customer data have been stored in database. Using such data, decision makers extract the useful information to make a valuable plan with data mining. In this paper, we design a forecasting model that classifies the exiting customers in the telecommunication industries using the classification rule, one of the data mining technologies. In other words, this paper builds a model of customer loyalty detection and analyzes customer patterns in mobile communication service market with data mining using neural network and regression methods. This model improves the relationship of customers and enterprises. As a result, the enterprise creates the profits from many customers and the customer receives more benefits from the enterprise.

  • PDF

차세대 그린 IDC 구축을 위한 국내.외 표준화 동향 및 전망

  • Lee, Jae-Bong;Lee, In-Su;Choe, Jeong-Yeol
    • Information and Communications Magazine
    • /
    • v.29 no.6
    • /
    • pp.14-21
    • /
    • 2012
  • 지식 정보화 사회로의 진입 이후로 IT 기술은 눈부실 정도로 빠르게 발전하고 있다. 이로 인해서 IT 분야의 전력 소비량도 급증하고 있으며, 전체 전력량의 약 2%를 차지하고 있다. 지구 온난화를 해결하기 위해서 IT 분야 자체의 에너지 절감은 물론 IT 기술을 활용한 가정 및 산업 분야의 에너지를 절감하려는 노력이 전세계적으로 진행되고 있다. 데이터센터는 IT 분야의 총아로 불리며 정보 제공 및 데이터웨어 하우스 기능을 수행한다. 데이터센터와 관련하여 더욱 주목해야할 것은 데이터센터가 전기먹는 하마처럼 엄청난 양의 전력을 소비한다는 것이다. 데이터센터는 그 용량 뿐만 아니라 그 수도 급증하고 있어 에너지 절감은 데이터센터의 미래를 결정짓는 핵심적이면서 필수적인 요소가 되었다. 본고에서는 에너지 효율적인 데이터센터, 즉 그린 IDC(Internet Data Center) 분야의 표준화 동향 및 전망에 대해서 기술하고 있다. 먼저 1장에서는 그린 IDC 연구에 대한 필요성과 국내외 유관 표준화 기구의 현황을 소개한다. 2장에서는 그린 IDC의 정의와 그린 IDC관련 표준화 동향을 살펴본다. 특히 ISO, ITU-T를 비롯한 국제 표준화 기구의 동향과 산업체 표준을 살펴본다. 한다. 3장은 2장에서 살펴본 국제 표준화 기구 및 산업체 표준을 바탕으로 향후 그린 IDC 표준화 추진을 위한 국제 및 국내표준화 추진 방향을 전망해본다.

Design of middleware in WSN for large scale glasshouse (대규모 유리 온실을 위한 WSN 환경에서의 미들웨어 설계)

  • Ju, Hui-Dong;Im, Hyeok-Jin;Lee, Meong-Hun;Yoe, Hyun
    • Proceedings of the Korean Institute of Information and Commucation Sciences Conference
    • /
    • 2007.06a
    • /
    • pp.351-353
    • /
    • 2007
  • Recently, the research trend and developmental tendency of ubiquitous computing technology are advancing with direction which seamlessly provides the optimum service to users through context-aware, analogy and networking with various sensor nodes. There is overwhelming needs to develop the WSN middleware platforms that have the functions dealing with data, monitoring, merged communication environments, and mutual compatibility with a variety of sensor networks. The purpose of study in WSN middleware platforms is to promptly provide the response for diverse queries from application services. Therefore, the actuator is enable to do action according to evets in for large scale glasshouse.

  • PDF

A Metadata-oriented Data Warehouse Architecture - S Hospital Case - (메타데이터 기반 데이터 웨어하우스 아키텍쳐 - ㅅ병원 사례를 중심으로 -)

  • Kim, Tae-Hun;Kim, Jong-Ho;Lee, Hee-Seok
    • Asia pacific journal of information systems
    • /
    • v.10 no.3
    • /
    • pp.79-103
    • /
    • 2000
  • Data warehouse is an intelligent store of data. A metadata is critical for implementing data warehouse. Integrating data warehouse with its metadata helps create a more adaptive information system. This paper proposes a metadata-oriented data warehouse architecture that consists of seven components: legacy, extracting, operational data store, data warehouse, data mart, application, and metadata. A taxonomy for dataflow and metaflow is proposed for better understanding of the architecture. In addition, a metadata schema is built within the framework of the seven components. Lastly, the architecture with its metadata component is applied to a real-life data warehouse project for a large medical center in order to illustrate its practical usefulness.

  • PDF

A study on the practical use of information for strategic management under the intranet environment (인트라넷기반의 전략경영을 위한 정보활용에 관한 연구)

  • 이원창;서의호
    • Proceedings of the Korean Operations and Management Science Society Conference
    • /
    • 1997.10a
    • /
    • pp.17-20
    • /
    • 1997
  • 경영 패러다임이 변하고 있다. 경영 패러다임의 변화는 여러 가지 측면에서 불소 있다. 시장의 세계화(Globalization), 기술 및 소비자 중심 경영(Technology & Customer-driven), 정보 위주의 경영(INformation-driven)이 그것이다. 이러한 경영환경 변화에 능동적으로 대처하고 정보기술의 전략적 활용을 통해 전략경영을 실현할수 있는 정보활용 측면의 연구가 시급하다 할 것이다. 따라서 본 연구의 기본 목적은 새롭게 등장하고 있는 인터넷/인트라넷이라는 기업컴퓨팅 환경의 변화에 능동적이고 적극적인 적응을 통해 전략경영을 위한 기업내.외부의 정보에 대한 가치를 증대시킬 뿐만 아니라 정보의 통제기능을 적절하게 수행할수 있는 정보활용의 방법론 연구에 데이터웨어하우스(DW)의 개념을 적용한 정보공유의 새로운 프레임웍을 제시하고자 한다.

  • PDF