• 제목/요약/키워드: 분산 처리

검색결과 4,226건 처리시간 0.034초

하둡 분산 파일 시스템 기반 소용량 파일 처리를 위한 동적 프리페칭 기법 (A Dynamic Prefetchiong Scheme for Handling Small Files based on Hadoop Distributed File System)

  • 유상현;윤희용
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2014년도 제50차 하계학술대회논문집 22권2호
    • /
    • pp.329-332
    • /
    • 2014
  • 클라우드 컴퓨팅이 활성화 됨에 따라 기존의 파일 시스템과는 다른 대용량 파일 처리에 효율적인 분산파일시스템의 요구가 대두 되었다. 그 중에 하둡 분산 파일 시스템(Hadoop Distribute File System, HDFS)은 기존의 분산파일 시스템과는 달리 가용성과 내고장성을 보장하고, 데이터 접근 패턴을 스트리밍 방식으로 지원하여 대용량 파일을 효율적으로 저장할 수 있다. 이러한 장점 때문에, 클라우드 컴퓨팅의 파일시스템으로 대부분 채택하고 있다. 하지만 실제 HDFS 데이터 집합에서 대용량 파일 보다 소용량 파일이 차지하는 비율이 높으며, 이러한 다수의 소 용량 파일은 데이터 처리에 있어 높은 처리비용을 초래 할 뿐 만 아니라 메모리 성능에 악영향을 끼친다. 하지만 소 용량 파일을 프리패칭 함으로서 이러한 문제점을 해결 할 수 있다. HDFS의 데이터 프리페칭은 기존의 데이터 프리페칭의 기법으로는 적용하기 어려워 HDFS를 위한 데이터 프리패칭 기법을 제안한다.

  • PDF

웹을 이용한 가상 실시간 상호작용 분산 시뮬레이션 환경엣 클라이언트-서버 모델의 설계 및 구현 (Design and Implementation of Client-Server Model on Virtual Real-time Interactive Distributed Simulation Environment Using Web)

  • 정진립;우영제;정창성
    • 한국정보처리학회논문지
    • /
    • 제6권1호
    • /
    • pp.57-65
    • /
    • 1999
  • 규모가 크고 복잡하며, 사용자와 상호 작용하는 시뮬레이션은 처리되는 메시지 수가 매우 많으므로 메시지의 순차적 시뮬레이션이 더 효율적이라 생각할 수 있다. 또한 사용자가 많은 훈련용 시뮬레이션은 지역적으로 분산되고 사용자의 추가 요구 사항의 증가로 시스템의 운용 및 유지보수 비용이 많이 든다. 따라서 시뮬레이션에 웹 기술의 적용은 이러한 문제를 해결할 수 있는 하나의 방법이 될 수 있다. 하지만 웹의 동적인 환경은 분산 처리되는 사건들의 인과성 오류를 유발 할 수 있다. 따라서 본 논문에서는 분산 처리되는 시뮬레이션 서버와 웹 브라우저의 클라이언트 사이에 상호작용을 위한 클라이언트-서버 모델을 제시하고 구현하였으며, 구현에는 웹 기술에 적합한 자바와 자바 분산 객체 모델을 사용하였다. 제시된 모델에 의한 실험결과 인터넷의 동적인 환경에 분산 시뮬레이션이 정확하게 수행되었음을 확인할 수 있었다.

  • PDF

공간정보 처리를 위한 데이터베이스 미들웨어 구현 (Implementation of Database MiddleWare for Geospatial Data Processing)

  • 이진규;안기호;김태희;이형진;이용우
    • 한국측량학회:학술대회논문집
    • /
    • 한국측량학회 2009년도 춘계학술발표회 논문집
    • /
    • pp.145-150
    • /
    • 2009
  • 본 논문은 차세대 수치지도 구축을 위해 지형정보 처리를 위한 미들웨어의 구현에 대한 논문이다. 구현되는 미들웨어는 분산된 이기종 공간데이터베이스를 기반으로 하여 이들간의 분산 트랜잭션 처리, 비 표준화 상태의 공간데이터의 처리, 글로벌 스키마 관리, UFID를 기반으로한 객체 관리와 분산된 대용량 데이터를 처리할 수 있는 기능을 가지고 있다. 또한, 사용자의 필요한 로직을 구현을 할 수 있도록 Corba와 RMI를 활용한 분산 인터페이스를 제공하여, 사용자 프로시져의 생성, 유지 및 호출을 할 수 있는 기능을 가지고 있다. 본 논문에서는 이기종 공간 데이터 저장소를 이용한 대용량 수치지도 관리에 적합한 분산 객체형 데이터베이스 미들웨어 구현에 대해 설명한다.

  • PDF

스타형 분산 컴퓨터 시스템의 동작 부하분산을 위한 효율적인 위치결정 정책 (Effective Destination Decision Policies for Dynamic Load Balancing in Distributed Computer Systems with Star Topology)

  • 임경수;하성룡;김종근
    • 한국정보처리학회논문지
    • /
    • 제2권5호
    • /
    • pp.768-776
    • /
    • 1995
  • 스타형의 분산 컴퓨터 시스템에서는 중앙노드의 처리능력이 주변노드들의 처리 능 력에 비해 클 수가 있고 또 각 노드의 작업도착률은 서로 다를 수 있다. 따라서 작업 전송을 위한 송신자 기준과 수신자 기준의 선택에 따라 부하분산의 성능은 크게 달라 진다. 하지만 이종의 분산 컴퓨터 시스템에서 최적 송신자 및 수신자 기준의 설정은 매우 어렵다. 본 논문에서는 동적부하분산을 위하여 고정 임계값 대신에 노드의 평균 응답시간이나 작업의 기대응답시간과 같은 동적 기준을 사용하는 효율적인 위치 결정 부하 분산 정책을 제안한다.

  • PDF

데이타베이스 공유 시스템에서 동적 부하 분산 (Dynamic Load Balancing for Database Sharing Systems)

  • 정창욱;조행래
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2002년도 춘계학술발표논문집 (상)
    • /
    • pp.75-78
    • /
    • 2002
  • 데이타베이스 공유 시스템(Database Sharing System: DSS)은 고성능의 온라인 트랜잭션 처리를 위해 다수 개의 컴퓨터를 연동하는 방식으로 각 노드들은 디스크 계층에서 데이타베이스를 공유한다. DSS를 구성하는 각 노드에 트랜잭션을 할당하는 정책이 잘못될 경우 특정 트랜잭션의 폭주로 노드에 과부하가 발생할 수 있으므로. 각 노드의 성능을 최적화하기 위한 부하 분산이 필요하다. 본 논문에서는 트랜잭션 클래스에서 참조하는 데이터베이스의 핫 셋 크기, 각 노드의 메모리 크기와 CPU 성능, 동시에 실행되는 트랜잭션 수의 변화에 따른 처리량 등을 고려한 동적 부하 분산 기법을 제안한다.

  • PDF

대학교 PC 실습실 기반의 대규모 병렬.분산 처리 시스템 (Parallel and Distributed System Based on PC Lab.)

  • 김상선;정갑주
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (1)
    • /
    • pp.367-369
    • /
    • 2003
  • 최근 응용과학 분야를 연구하는데 많은 컴퓨팅 자원을 필요로 하고 있다. 예로 미생물학 분야에서 분자 모사를 이용한 바이오-나노 연구는 대규모 컴퓨팅 자원을 필요로 한다. 그와 함께 대규모 컴퓨팅 환경을 구축하기 위해서는 많은 자본이 필요하지만, 대부분의 대학에서는 예산 부족 및 관리 능력 부족으로 인해 이러한 장비를 보유하지 못하고 있는 실정이다. 본 논문에서는 이러한 상황에서 컴퓨팅 자원을 제공하기 위해 기존의 대학 실습실의 컴퓨터들을 이용해서 대규모 병렬-분산 처리 시스템을 구현 모델로 제시하고 실제 직접 구현한 결과를 보여준다. 구현 결과로는 병렬-분산 처리 시스템인 PLinda 시스템과 애플리케이션인 Raytracing 병렬처리 프로그램을 보여 준다.

  • PDF

분산 컨테이너 클러스터 상의 JMS 메시지 처리 연구 (JMS Message Processing on a Distributed Container Clustering)

  • 조정근;최은미
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2019년도 추계학술발표대회
    • /
    • pp.125-128
    • /
    • 2019
  • 클라우드 가상화에서 최근 가장 많이 사용되는 컨테이너(container) 기술은 성능 향상과 이식성 및 확장성의 특징을 가지고 있다. 본 논문에서는 컨테이너 특성을 살펴보고, Docker 를 포함한 여러 컨테이너들을 비교해 본다. 본 연구의 시스템 아키텍처로, JMS(Java Message Service)기반의 분산 컨테이너 클러스터를 구성하였다. 분산 컨테이너 클러스터 상에서 메시지 처리 속도를 지표로 삼아 컨테이너 수와 Docker engine 의 메모리의 증가에 따른 성능을 비교 분석하였다.

GUI 지원 DPD-Tool을 이용한 분산응용 개발 (Development of Distributed Applications Using DPD-Tool Supporting GUIs)

  • 임정택;김명희;심재훈;주수종
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2005년도 추계학술발표대회 및 정기총회
    • /
    • pp.769-772
    • /
    • 2005
  • 그동안 우리는 분산응용을 구성하는 자원들을 하나의 논리적인 그룹으로 관리하기 위한 연구를 수행하여 분산객체그룹 프레임워크(Distributed Object Group Framework, DOGF)를 구축하였다. 또한 DOGF 기반에서 분산응용의 복잡한 개발절차를 최소화하고, 이전에 개발된 분산자원들의 재사용성을 효율적으로 제고할 수 있는 분산프로그램 개발도구인 DPD-Tool(Distributed Programming Developing Tool)을 개발하였다. 본 논문에서는 우리가 개발한 GUI 지원 DPD-Tool을 이용한 분산응용의 개발 편리성과 DOGF가 지원하는 그룹관리 분산서비스의 수행성을 검증한다. 이를 위해 GUI 기반에서 분산응용의 예를 들어 서버와 클라이언트 측의 개발절차를 제시하며, 이로부터 DPD-Tool이 DOGF의 지원 서비스를 통하여 그룹화 분산응용 내 중복자원들을 효율적으로 이용하는지 그 수행결과를 확인한다.

  • PDF

분산프로그래밍 도구의 프로그래밍투명성 지원 방안 (A Methodology to Support Programming Transparency for Distributed Programming Tool)

  • 이상윤
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (3)
    • /
    • pp.52-54
    • /
    • 2003
  • 분산 컴퓨팅 환경에서 동작할 프로그램을 보다 쉽게 작성하기 위한 다양한 형태의 분산프로그래밍 도구들이 개발되어왔다. 그러나, 이러한 도구들을 이용하기 위해서는 각각의 도구가 요구하는 프로그래밍 방법을 숙지하여야 하는 부담을 감수해야 한다. 이런 부담은 분산프로그래밍 도구가 만족할 만한 프로그래밍 투명성을 제공하지 못하기 때문이고, 프로그램 작성시, 문제의 본질에만 집중하는 것을 방해한다. 본 논문에서는 프로그래밍 투명성을 지원하는 분산프로그래밍 도구를 개발하기 위한 방법을 제안한다. 제안된 방법의 테스트를 위하여 독자적인 분산실행환경을 설계하였으며, 이 환경에서 동작하는 분산 프로그램을 작성하여 단위테스트를 수행하였다. 이 프로그램은 분산처리를 위하여 특별히 정의된 문법(Syntax)을 전혀 사용하지 않았으며, 후처리만을 통하여 설계된 분산실행환경에서 분산프로그램의 역할을 수행한다.

  • PDF

CORBA 기반 객체 보안에 관한연구 (A Study on the CORBA Based Object Security)

  • 송기범;이준
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2002년도 추계학술발표논문집 (상)
    • /
    • pp.567-570
    • /
    • 2002
  • CORBA 기반 객체보안은 인터넷의 활성화와 더불어 각광받고 있는 분야중의 하나이며 많은 응용 소프트웨어들이 분산객체 기술을 이용한 컴포넌트 형태로 개발되고 있다. CORBA 기반 객체 보안 기술을 기반으로 한 CORBA는 새로운 세대의 분산 컴퓨팅 플랫폼이며, 보안은 항상 분산 컴퓨팅 플랫폼의 기본적인 문제이다. 따라서, CORBA 플랫폼에서의 보안 서비스의 적용은 매우 중요하다. 본 논문에서는 보안의 표준들과 분산 계산 플랫폼의 보안 모델들을 참조를 CORBA 보안 서비스 규약을 따르는 객체지향 분산 환경에서의 CORBA 기반 객체 보안 기술을 제시한다.

  • PDF