• 제목/요약/키워드: 저장 관리 시스템

검색결과 2,647건 처리시간 0.029초

블록 단위 트랜잭션을 이용한 대용량 데이터의 실시간 저장관리기 (Real time Storage Manager to store very large datausing block transaction)

  • 백성하;이동욱;어상훈;정원일;김경배;오영환;배해영
    • 한국공간정보시스템학회 논문지
    • /
    • 제10권2호
    • /
    • pp.1-12
    • /
    • 2008
  • 초당 최소 5만 건에서 50만 건이 넘는 삽입트랜잭션이 발생하는 반도체 자동 생산 공정 시스템은 대량의 데이터를 실시간으로 저장하는 저장관리시스템을 필요로 한다. 대용량의 데이터를 빠르고 안정적으로 저장하기 위해서 많은 저장관리시스템이 연구되었다. 기존의 저장관리시스템은 대표적으로 전형적인 디스크 기반 DBMS가 있다. 그러나 디스크 기반 DBMS는 초당 50만 건의 삽입트랜잭션 처리는 매우 어렵다. 그래서 디스크 기반 DBMS의 성능을 향상시키기 위해 데이터를 디스크가 아닌 메인메모리를사용하는 메인메모리 DBMS가 등장하였다. 그러나 메인메모리 DBMS는 메인메모리 용량의 한계로 인해 대용량 데이터를 저장하는 것은 어렵다. 본 논문에서는 초당 5만 건 이상의 삽입트랜잭션을 지원하고 대용량 데이터를 저비용으로 저장하기 위해 블록단위의 삽입 트랜잭션을 사용한 저장관리시스템을 제안한다. 블록단위의 삽입 트랜잭션은 개별 튜플 단위의 로그기록 비용과 인덱스 생성비용을 블록단위로 변경시켜 비용을 크게 감소시킬 수 있다. 또한 제안시스템은 데이터를 압축 저장하여 저장 비용을 감소시킬 수 있다. 그러나 압축기법은 데이터의 필드정보가 유실되어 모든 데이터의 압축을 해제하는 비용이 발생한다. 이 문제를 해결하기 위해 제안시스템은 압축 시 압축되는 블록의 인덱스를 생성하여 데이터 검색 속도를 향상시켰다. 본 제안시스템은 반도체 공정에서 빠르게 발생하는 대용량 데이터를 고속으로 저장할 수 있고, 디스크 저 장비용을 감소시킬 수 있다.

  • PDF

Tertiary 저장장치를 사용한 비디오 서버 (Video Server with Tertiary Storage)

  • 이종민;오재학;차호정
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2000년도 가을 학술발표논문집 Vol.27 No.2 (3)
    • /
    • pp.44-46
    • /
    • 2000
  • 본 논문은 Tertiary 저장장치를 이용한 대용량 비디오 서버의 설계와 구현에 대해서 기술한다. 서버는 서비스와 프로세스 관리 서브시스템, 자원 관리 서브시스템, 입출력 관리 서브시스템의 세 부분으로 구성된다. 입출력 대역폭이 낮은 Tertiary 저장장치의 효율적인 사용을 위해 디스크 캐쉬 풀 모델을 사용하고, 적절한 스케줄링 정책과 캐슁 알고리즘을 이용하여 가능한 많은 사용자를 수용한다. 서버는 Windows 2000에서 시스템 서비스로 구현되었으며 디스크 캐쉬의 효과적인 사용으로 Tertiary 저장장치의 낮은 대역폭을 최대한 활용하여 접속된 사용자에게 안정된 비디오 스트리밍 서비스를 제공한다.

  • PDF

지능적 식품 저장고 관리를 위한 온툴로지 기반 상황인지 미들웨어 설계 및 구현 (Design and Implementation of Ontology based Situation-Awareness Middleware for Intelligent Food-warehouse Management)

  • 김기환;남태우;염근혁
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2011년도 한국컴퓨터종합학술대회논문집 Vol.38 No.1(A)
    • /
    • pp.178-181
    • /
    • 2011
  • 식물 저장을 위한 저온 저장고의 수요가 증가함에 따라 지능화되고 효율적인 저장고 관리 시스템에 대한 요구 또한 증가하고 있다. 기존의 저장고 관리 시스템은 관리자의 경험에 의존적이거나 센서의 임계치에 따른 단순한 상황 판단만이 가능한 수준으로, 식품에 따른 정밀한 신선도 관리가 불가능하다. 그에 따라 식품의 신선도 관리, 저장고 관리의 효율성 향상을 위해 상황인지 기술 도입이 고려되고 있으며, 그 중 환경 정보(Context)에 대한 관계를 모델링하기 위한 적합한 온톨로지 기반 상황인지 기술이 가장 주목받고 있다. 본 논문에서는 이러한 온톨로지를 이용하여 식품 저장고 운영에 필요한 상황인지 기능을 제공해줄 상황인지 미들웨어를 제안하며, 환경 정보 모델링 도구와 센서 및 저장고 운영 정보를 획득하는 방법, 이를 활용한 상황 추론을 수행할 온톨로지 매핑 방법을 제시하였고 이를 실질적으로 수행해 줄 상황인지 프로세스를 설계하고 구현하였다.

ODMG 객체 모델 기반의 XML 문서 저장 관리 시스템에 관한 연구 (A Study on XML Document Repository Management System using ODMG Object Model)

  • 박준범;박경우;오수열
    • 한국컴퓨터정보학회논문지
    • /
    • 제8권2호
    • /
    • pp.16-23
    • /
    • 2003
  • XML 문서의 저장 및 관리를 위해, 기존의 관계형 DBMS를 이용해왔다. 그러나 관계형 DBMS를 이용할 경우 XML 문서 구조를 관계형 데이터베이스로 매핑할 때, 정보 손실이 발생할 수 있으며, XML의 특성을 완벽히 반영하는 새로운 저장 관리 시스템을 새로이 구현하는 것은 많은 비용이 소요된다. 본 논문에서는 이러한 문제점을 극복하고, XML문서의 구조적 특성을 충분히 반영하기 위해, 기존의 객체지향형 DBMS인 O2 DBMS를 기본 저장 구조로 이용하면서, XML문서가 가지고 시는 다양한 특징을 수용할 수 있도록 하는 XML문서 저장 관리 시스템을 설계하고 구현하였다. 구현한 XML문서 관리 시스템 기능들로서는 전자 문서에 대한 라이브러리 서비스 기능(체크인/체크아웃, 버전제어, 사용자 액세스 관리 등), 동적 색인 및 구조 정보 검색 기능. 스타일시트를 이용한 출판 기능을 하는 XML문서 저장 관리 시스템이다.

  • PDF

cDNA 마이크로어레이 데이터의 분석과 관리 시스템: cMAMS (cDNA Microarray data Analysis and Management System: cMAMS)

  • 김상배;김효미;이은정;김영진;박정선;박윤주;정호열;고인송
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2004년도 봄 학술발표논문집 Vol.31 No.1 (B)
    • /
    • pp.247-249
    • /
    • 2004
  • 마이크로어레이 기술은 근래에 개발된 신기술로써 동시에 수천-수만 개의 유전자 발현을 측정할 수 있어 다양한 생물학적 연구에 이용되고 있다. 여러 단계의 실험 과정과 이를 통해 얻은 다량의 데이터를 처리하기 위해서는 이를 효율적으로 관리. 저장, 분석할 수 있는 통할 정보 관리 시스템을 필요로 한다. 현재 외국에서는 몇몇 관리시스템이 개발되어 있고. 국내에서도 WEMA 등이 있지만 아직 데이터 관리부분에 기능이 치우쳐 있다. 따라서 우리는 복잡한 자료구조를 가지는 마이크로어레이의 실험 정보와 각 단계별 처리 정보 등을 사용자의 관점에서 효과적이고 체계적으로 관리할 수 있고, 데이터 정규화 및 다양한 통계적 분석 기능을 갖춰 불필요한 시간과 비용을 줄임으로써 마이크로어레이 연구에 도움을 주고자 통합 분석관리 시스템 cMAMS (cDNA Microarray Analysis and Management System)를 개발하였다. 웹 기반으로 구현된 cMAMS는 데이터를 저장, 관리하는 부분과 데이터를 분석하는 부분, 그리고 모든 관련 점보가 저장되는 데이터베이스 부분으로 구성되어 있다 데이터관리부분에서는 WEMA의 계층적 데이터구조론 도입해 관리의 효율성을 높이고 시스템의 이용자를 시스템운영자, 프로젝트관리자, 일반사용자로 구분하여 데이터 접근을 제한함으로써 보안성을 높였다. 통계처리 언어 R로 구현된 데이터분석 부분은 7 단계의 다양한 분석(전처리 정규화, 가시화, 군집분석. 판별분석, 특이적 발현 유전자 선뿐, 마이크로어레이 간의 상판분석)이 가능하도록 구현하였고, 분석결과는 데이터베이스에 저장되어 추후에 검토 및 연구자간의 공유가 가능하도록 하였다. 데이터베이스는 실험정보가 저장된 데이터베이스, 분석결과가 저장된 데이터베이스, 그리고 유전자 정보 탐색을 위한 데이터베이스로 분류해 데이터를 효율적으로 관리할 수 있게 하였다. 본 시스템은 LiNUX를 운영체계로 하고 데이터베이스는 MYSQL로 하여 JSP, Perl. 통계처리 언어인 R로 구현되었다.

  • PDF

KORED/StormNT: 공간 데이터베이스를 위한 저장관리자의 설계 및 구현 (KORED/StormNT: Design and Implementation of a Storage Manager for Spatial Database)

  • 김종현;김명근;김성희;배해영
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2001년도 봄 학술발표논문집 Vol.28 No.1 (B)
    • /
    • pp.235-237
    • /
    • 2001
  • 기존의 대용량 멀티미디어 데이터와는 달리 다양한 크기와 접근 패턴을 가지는 공간데이터를 효율적으로 저장 관리하기 위해서는 이러한 공간 데이터의 특성을 고려한 공간데이터베이스 시스템을 위해서는 공간데이터를 저장 관리하기 위한 저장관리자의 연구가 선행되어야 한다. 본 논문에서는 공간데이터의 특성을 고려하여 효율적으로 저장 관리하기 위한 공간 데이터베이스 관리 시스템의 저장관리자인 KORED/StormNT를 제안한다. KORED/StormNT에서는 다양한 크기를 가지는 공간데이터의 특성을 고려하여 디스크 입출력 비용을 최소로 줄일 수 있는 공간데이터 저장기법을 사용하였으며, 공간데이터의 크기에 따른 회복기법을 사용하여 회복비용을 최소화하였다. 또한, 공간죠인(Spatial Join) 연산을 효율적으로 지원하기 위해 별도의 테이블을 이용한 기법을 사용한다.

  • PDF

이동 객체의 효율적인 저장과 검색을 위한 화일 기반 이동 객체 저장 컴포넌트의 개발 (Development of a File-based Moving Objects Storage Component for Efficient Storage and Retrieval of Moving Objects)

  • 장유정;김동오;홍동숙;한기준
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2004년도 봄 학술발표논문집 Vol.31 No.1 (B)
    • /
    • pp.118-120
    • /
    • 2004
  • 최근 무선 인터넷 인구의 증가로 인해 이동 객체의 위치 데이타를 활용하여 다양한 서비스를 제공하는 위치 기반 서비스와 텔레매틱스에 대찬 관심이 급증하고 있다 위치 기반 서비스와 텔레매틱스 분야에서 다양한 응용 서비스를 제공하기 위해서는 대용량의 위치 데이타를 빠르고 정확하게 저장하고 검색할 수 있는 이동 객체 데이타베이스 시스템이 필수적으로 요구된다. 그러나, 기존의 데이타베이스 시스템을 사용하여 대용량의 위치 데이타를 처리할 경우 트랜잭션 연산의 증가로 인하여 저장 밀 검색 성능이 저하된다 이러한 문제점을 해결하기 위해 본 논문에서는 이동 객체의 위치 데이타를 효율적으로 저장하고 검색하기 위한 화일 기반 이동 객체 저장 컴포넌트를 개발하고 성능 평가를 수행하였다. 화일 기반 이동 객체 저장 컴포넌트는 다중 연결 관리자, 단순 질의 처리기, 인덱스 관리자. 데이타 화일 관리자, 인덱스 파일 관리자, 메타데이타 관리자, 로그 관리자, OLE DB 데이타 제공자, 그리고 관리툴로 구성된다.

  • PDF

웹기반의 생산현장 원격관리 시스템개발

  • 배경환;배미영;박은주;임한규;이남일
    • 한국산업정보학회:학술대회논문집
    • /
    • 한국산업정보학회 1998년도 공동추계학술대회 경제위기 극복을 위한 정보기술의 효율적 활용
    • /
    • pp.835-847
    • /
    • 1998
  • 관리사무실에서 원거리 현장사무실을 관리할 수 있는 직접적인 방법이 없는 형편이다. 전화나 팩스를 이용할 경우에 소요되는 인력이나 경제적 손실등에대한 낭비가 막대하다. 이에 따라 감시 카메라를 사용하는 기업이 산업화가 가속화되면서 점차 늘어나고 있다. 생산 현장등에서 차량 감시 시스템, 경비 시스템, 주차장 관리 시스템등의 다양한 부문별로 감시 카메라를 이용하는 기업들이 많이 있다. 이러한 기업들의 시스템에서 실시간 감시 관리 시스템을 이용하여 동화상 자체를 카메라에 연결된 시스템의 저장매체에 저장하고 있으며, 이를 감시인이 원거리에서 실시간 감시하고 있다. 이런 경우에는 시스템의 비용이 고가이고 저장된 영상의 분석 또한 쉽지 않다. 이러한 문제점을 해결하고자 경제적이고 실용적인 방법으로 감시 카메라, 영상 전송 시스템, 영상 분석 시스템등으로 구성되어 웹 기반으로 활용할 수 있는 생산현장 원격 관리 시스템을 제안한다.

XML 저장 관리 시스템에서 효율적인 버전 관리 및 문서 저장 방안 (An Efficient Method of Document Store and Version Management for XML Repository System)

  • 정현주;김권양;최재혁
    • 컴퓨터교육학회논문지
    • /
    • 제6권4호
    • /
    • pp.11-21
    • /
    • 2003
  • 빠르게 변하는 정보화 사회에서 방대한 양의 문서 정보를 전자 문서로 만들고 관리하는 것은 필수적이다. 이러한 전자 문서를 표현하는 데 있어서 사용하는 문서 내에 포함된 모든 정보를 손실 없이 저장하고 관리하는데 적합한 언어가 전자 문서의 표준인 XML이다. 본 논문에서는 문서의 변경이 발생한 경우에 문서 전체가 아닌 변경이 발생한 내용만 버전을 부여하고 저장함으로써 저장 공간을 절약하였다. 그리고 문서의 변경 내용이 일정한 크기 이하이면 JOIN 연산을 생략할 수 있도록 시스템을 설계함으로써 JOIN 연산으로 인한 시스템의 성능 저하를 줄여 효율적인 XML 문서 저장과 빠른 검색 및 버전 관리가 가능한 방안을 제시하고, 이를 적용한 문서 저장 관리 시스템을 구현하였다.

  • PDF

삼차원 가상 공간 객체 저장 시스템의 설계 및 구현 (Design and Implementation of Three-dimensional Virtual Space Object Storage System)

  • 윤동하;임윤주;이종학
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2003년도 추계학술발표논문집 (하)
    • /
    • pp.1441-1444
    • /
    • 2003
  • 최근 삼차원 가상 공간 객체를 편리하게 제작하기 위해서 가상 공긴 객체 저작도구들이 많이 사용되고 있다. 이러한 저작 도구를 이용하여 만들어진 삼차원 가상 공간 객체는 기계, 화학, 건축, 교육, 상업 등의 다양한 분야에서 그 응용이 확산되고 있다. 그러나 기존의 저작도구에서는 삼차원 공간 객체를 순차 접근 방식을 사용한 파일 저장 시스템을 사용하기 때문에 객체의 삽입, 삭제, 갱신 및 탐색에 비효율적인 면이 있다. 그뿐만 아니라 고정 길이 속성을 가지는 객체의 관리에는 효율적이나 가변 길이 속성을 가지는 공간 기체의 관리에는 효율적이지 못하다. 따라서, 본 논문에서는 현재 널리 사용되어지고 있는 관계형 데이타베이스 관리 시스템 중의 하나인 MySQL의 저장시스템을 변경하여 가변길이 속성을 가지는 삼차원 공간 객체의 저장과 관리에 효율적인 저장 시스템을 설계하고 구현한다. 그리고 확장된 $B^+$-트리를 사용하여 삼차원 객체의 빠른 검색을 지원한다.

  • PDF