• 제목/요약/키워드: network storage

검색결과 1,074건 처리시간 0.029초

망 분리 환경에서 스토리지 기반의 데이터 공유 시스템 설계 및 구현 (Design and Implementation of Storage-based Data Sharing System in the Separate Network Environment)

  • 조인휘;이석순
    • 한국통신학회논문지
    • /
    • 제36권5B호
    • /
    • pp.477-483
    • /
    • 2011
  • 본 논문에서는 망이 분리된 환경에서 스토리지 기반의 데이터 공유 시스템을 구축하는 경우 데이터 전송의 효율을 개선하기 위하여 어떻게 시스템을 설계하고 구현해야 하는지에 대해서 제안하고자 한다. 기존 시스템은 사용자 PC 에서 수신된 단위 패킷별로 파일을 생성하고 스토리지를 통하여 생성된 파일의 수만큼 상대편 망으로 전송을 한다. 스토리지를 통해서 다수의 파일을 전송하는 경우 파일에 할당된 블록 외에 추가적으로 불필요한 블록도 함께 읽어야 함으로써 전송 시 비효율이 발생했다. 제안 시스템은 이러한 비효율을 제거하기 위해서 통일한 시점에 수신되는 패킷에 대해서 스냅 샷 개념을 도입하여 하나의 파일에 저장하고 생성되는 파일의 수를 최대한 줄이고 블록 사이즈에 최적화 되도록 하여 파일을 생성했다. 이렇게 생성된 파일은 불필요한 블록을 읽어 들이는 것을 최소화하여 전송함으로써 기존의 방식보다 사용자 응답속도가 개선되었다.

인피니밴드 네트웍에서 RDMA 기반의 저장장치 서비스 프로토콜개발 (Implementation of Storage Service Protocol on Infiniband based Network)

  • 전기만;박창원;김영환
    • 한국정보통신설비학회:학술대회논문집
    • /
    • 한국정보통신설비학회 2006년도 하계학술대회
    • /
    • pp.77-81
    • /
    • 2006
  • Because of the rapid increasing of network user, there are some problems to tolerate the network overhead. Recently, the research and technology of the user-level for high performance and low latency than TCP/IP which relied upon the kernel for processing the messages. For example, there is an Infiniband technology. The Infiniband Trade Association (IBTA) has been proposed as an industry standard for both communication between processing node and I/O devices and for inter-processor communication. It replaces the traditional bus-based interconnect with a switch-based network for connecting processing node and I/O devices. Also Infiniband uses RDMA (Remote DMA) for low latency of CPU and OS to communicate between Remote nodes. In this paper, we develop the SRP (SCSI RDMA Protocol) which is Storage Access Protocol on Infiniband network. And will compare to FC (Fibre Channle) based I-SCSI (Internet SCSI) that it is used to access storage on Etherent Fabric.

  • PDF

Interworking technology of neural network and data among deep learning frameworks

  • Park, Jaebok;Yoo, Seungmok;Yoon, Seokjin;Lee, Kyunghee;Cho, Changsik
    • ETRI Journal
    • /
    • 제41권6호
    • /
    • pp.760-770
    • /
    • 2019
  • Based on the growing demand for neural network technologies, various neural network inference engines are being developed. However, each inference engine has its own neural network storage format. There is a growing demand for standardization to solve this problem. This study presents interworking techniques for ensuring the compatibility of neural networks and data among the various deep learning frameworks. The proposed technique standardizes the graphic expression grammar and learning data storage format using the Neural Network Exchange Format (NNEF) of Khronos. The proposed converter includes a lexical, syntax, and parser. This NNEF parser converts neural network information into a parsing tree and quantizes data. To validate the proposed system, we verified that MNIST is immediately executed by importing AlexNet's neural network and learned data. Therefore, this study contributes an efficient design technique for a converter that can execute a neural network and learned data in various frameworks regardless of the storage format of each framework.

SANtopia를 위한 성능 감시 및 구성 관리 도구의 설계 및 구현 (Design and Implementation of a Performance Monitoring and Configuration Management Tool for SANtopia)

  • 임기욱;나용희;민병준;서대화;신범주
    • 인터넷정보학회논문지
    • /
    • 제4권1호
    • /
    • pp.53-65
    • /
    • 2003
  • 상대적으로 느린 저장 장치들의 입출력 처리 속도는 컴퓨터 시스템의 전체적인 성능을 저하시키는 요인이 된다. 이를 개선하기 위한 한 방안으로 SAN(Storage Area Network)이 제안되었다. 파이버채널과 같은 과속 네트워크에 저장 장치가 직접 연결된 SAN시스템을 효율적으로 이용하기 위해서는 적절한 관리 도구가 필요하다. 본 논문에서는 SAN 환경에서 전역 파일 공유를 제공하는 SANtopia 시스템을 위한 성능 감시 및 구성 관리 도구의 설계 및 구현 결과에 대하여 논한다. 개발된 도구는 SANtopia시스템을 구성하는 리눅스 호스트의 성능을 감시하고 호스트 및 저장 장치들의 구성을 관리하기 위한 것이며 자바 언어를 이용하여 GUI(Graphic User Interface)를 제공한다.

  • PDF

OASIS : IP 기반의 대규모 광역 스토리지 시스템 (OASIS : Large-scale, wide-area storage system based on IP)

  • 김홍연;김영철;진기성;김영균;이미영
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2004년도 추계 종합학술대회 논문집
    • /
    • pp.275-279
    • /
    • 2004
  • 본 논문은 한국 전자통신연구원에서 개발하고 있는 IP 기반의 대규모 광역 스토리지 시스템에 관한 논문이다. OASIS는 IP 네트워크 상의 수백~수천 명의 동시 사용자를 효과적으로 지원하고 또한 네트워크 스토리지 서비스를 WAN 범위까지로 확대 시키는 것을 목적으로 하는 스토리지 시스템이다. 이를 위해 IP 기반 스토리지 연결망 기술과 객체 기반 스토리지 기술 그리고 클러스터 기반 서버 구조 기술을 활용한다. 본 시스템은 특히 FTTH, WiBro 등 차세대 통신망의 도입에 따라 점차 현실성을 얻어가는 IP 기반 스토리지 서비스에서 대규모 스토리지 서비스를 위한 목적으로 활용될 수 있다.

  • PDF

IEEE1394로 구성된 Storage Area Network(SAN)의 성능평가 (Performance Evaluation of Storage Area Networks using IEEE1394 Serial Bus)

  • 황규진;조율제;김선일
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (3)
    • /
    • pp.655-657
    • /
    • 2003
  • 최근 네트워크의 발전과 더불어 정보의 크기는 점점 커져 가고 있으며 이를 효율적으로 공유하고 관리하는 것은 매우 중요한 일이다. 지속적으로 커지고 있는 방대한 양의 정보를 현재와 같이 하나의 디스크에서 관리하는 것은 많은 한계점을 가지고 있는데 이를 네트워크를 통한 여러 개의 디스크를 공유하는 SAN(Storage area Network)과 NAS(Network Attached Storage)의 방법을 통하여 해결 할 수 있다. SAN은 디스크와 클라이언트를 직접 연결하여 서비스를 제공하기 때문에 좋은 성능을 보이지만. 디스크와 클라이언트를 연결하는 장치의 가격이 비싼 단점이 있다. 이 논문에서는 기존의 SAN장치보다 저렴한 가격의 IEEE1394a 네트워크를 이용하여 SAN을 구성하고 NAS(NFS)와의 성능 비교를 하였으며, IEEE1394a 네트워크의 저가의 SAN으로의 성능적 측면에서의 가능성과 문제점을 알아보았다.

  • PDF

저장조 용량제약이 있는 회분식 공정-저장조 그물망 구조의 최적설계 (Optimal Design of Batch-Storage Network with Finite Intermediate Storage)

  • 김형민;김규년;이경범
    • 제어로봇시스템학회논문지
    • /
    • 제7권10호
    • /
    • pp.867-873
    • /
    • 2001
  • The purpose of this study is to find analytic solution of determining the optimal capacity (lot-size) of multiproduct acyclic multistage production and inventory system to meet the finished product demand under the constraint of finite intermediate storage. Intermediate storage is a practical way to mitigate the material flow imbalance through the line of supply and demand chain. However, the cost of constructing and operating storage facilities is becoming substantial because of increasing land value, environmental and safety concern. Therefore, reasonable decision-making about the capacity of processes and storage units is an important subject for industries. The industrial solution for this subject is to use the classical economic lot sizing method, EOQ/EPQ(Economic Order Quantity/Economic Production Quantity) model, incorporated with practical experience. But EOQ/EPQ model is not suitable for the chemical plant design with highly interlinked processes and storage units because it is developed based on single product and single stage. This study overcomes the limitation of the classical lot sizing method. The superstructure of the plant consists of the network of serially and/or parallelly interlinked non-continuous processes and storage units. The processes transform a set of feedstock materials into another set of products with constant conversion factors. A novel production and inventory analysis method, PSW(Periodic Square Wave) model, is applied to describe the detail material flows among equipments. The objective function of this study is minimizing the total cost composed of setup and inventory holding cost. The advantage of PSW model comes from the fact that the model provides a set of simple analytic solutions in spite of realistic description of the material flows between processes and storage units. the resulting simple analytic solution can greatly enhance the proper and quick investment decision for the preliminary plant design problem confronted with economic situation.

  • PDF

인공 신경망 모형을 활용한 저수지 군의 연계운영 기준 수립 (Development of Operating Guidelines of a Multi-reservoir System Using an Artificial Neural Network Model)

  • 나미숙;김재희;김승권
    • 산업공학
    • /
    • 제23권4호
    • /
    • pp.311-318
    • /
    • 2010
  • In the daily multi-reservoir operating problem, monthly storage targets can be used as principal operational guidelines. In this study, we tested the use of a simple back-propagation Artificial Neural Network (ANN) model to derive monthly storage guideline for daily Coordinated Multi-reservoir Operating Model (CoMOM) of the Han-River basin. This approach is based on the belief that the optimum solution of the daily CoMOM has a good performance, and the ANN model trained with the results of daily CoMOM would produce effective monthly operating guidelines. The optimum results of daily CoMOM is used as the training set for the back-propagation ANN model, which is designed to derive monthly reservoir storage targets in the basin. For the input patterns of the ANN model, we adopted the ratios of initial storage of each dam to the storage of Paldang dam, ratios of monthly expected inflow of each dam to the total inflow of the whole basin, ratios of monthly demand at each dam to the total demand of the whole basin, ratio of total storage of the whole basin to the active storage of Paldang dam, and the ratio of total inflow of the whole basin to the active storage of the whole basin. And the output pattern of ANN model is the optimal final storages that are generated by the daily CoMOM. Then, we analyzed the performance of the ANN model by using a real-time simulation procedure for the multi-reservoir system of the Han-river basin, assuming that historical inflows from October 1st, 2004 to June 30th, 2007 (except July, August, September) were occurred. The simulation results showed that by utilizing the monthly storage target provided by the ANN model, we could reduce the spillages, increase hydropower generation, and secure more water at the end of the planning horizon compared to the historical records.

Software-Defined RAID 기반 장애복구 기법과 실증 테스트 (Verification Test of Failover Recovery Technique based on Software-Defined RAID)

  • 차병래;최명수;박선;김종원
    • 스마트미디어저널
    • /
    • 제5권1호
    • /
    • pp.69-77
    • /
    • 2016
  • 본 논문은 분산 저장환경에 사용되는 RAID와 네트워크 가상화 기술을 융합하며 Software Defined Storaging 방법을 제안한다. 제안방법은 저장장치를 소프트웨어 기반으로 설계함으로써 유연한 제어 및 관리를 제공하여 물리적인 스토리지의 용량과 재해 복구비용을 절감할 수 있다. 제안된 Software-Defined RAID 기반의 장애복구 기법을 실질적인 퍼블릭 클라우드인 AWS와 구글 스토리지를 이용하여 실증 테스트 및 성능을 비교한다.

From Renewable Electricity to Green Hydrogen: Production and Storage Challenges for a Clean Energy Future

  • Hidouri Dalila;Rym Marouani;Cherif Adnen
    • International Journal of Computer Science & Network Security
    • /
    • 제24권6호
    • /
    • pp.171-179
    • /
    • 2024
  • Decentralized energy production without greenhouse gas emissions from renewable energy sources despite their advantage and environmental impact suffers from the problem of intermittent and fluctuating supply depending on weather conditions. To overcome this problem, energy storage is essential to enable reliable and continuous supply of the load. Hydrogen is one of the most promising energy storage solutions because it is easily transportable and can be used as fuel or as a raw material for the production of other chemicals.In this article, we will focus on hydrogen energy storage techniques using photovoltaic systems. We will review the different types of hydrogen storage structuresfor several applications, including residential and commercial buildings, as well as industry and transportation (electric vehicles using PEFMC fuel cells).