• Title/Summary/Keyword: 글로버스 툴킷

Search Result 15, Processing Time 0.033 seconds

Design and Implementation of Distributed Web Crawler Using Globus Environment (글로버스를 이용한 분산 웹 크롤러의 설계 및 구현)

  • 이지선;김양우;이필우
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2004.04a
    • /
    • pp.712-714
    • /
    • 2004
  • 대부분의 웹 검색 엔진들과 많은 특화된 검색 도구들은 웹 페이지의 색인화와 분석을 위한 전처리 단계로 대규모 웹 페이지들을 수집하기 위해 웹 크롤러에 의존한다. 일반적인 웹 크롤러는 몇 주 또는 몇 달의 주기에 걸쳐 수백만 개의 호스트들과 상호작용을 통해 웹 페이지 정보를 수집한다. 본 논문에서는 이러한 크롤러의 성능향상과 효율적인 실행을 위해 그리드 미들웨어인 글로버스 툴킷을 이용하여 분산된 크롤러를 제안한다. 본 웹 크롤러의 실행은 그 기능의 분산처리를 위한 각 호스트 서버들을 글로버스로 연결하고, 인증하여, 작업을 할당하는 단계와, 크롤러 프로그램이 실행되어 자료를 수집하는 단계. 마지막으로 이렇게 수집된 웹 페이지 정보들을 처음 명령한 시스템으로 반환하는 단계로 나누어진다. 결과 수집 작업을 보다 분산화 할 수 있게 하였으며 여러 대의 저 비용의 시스템에서 고 비용, 고 사양의 서버의 성능을 얻을 수 있었으며, 확장이 용이하고, 견고한 크롤러 프로그램 및 시스템 환경을 구축할 수 있었다.

  • PDF

Web Services-based Multidisciplinary Design Optimization System (웹 서비스 기반 MDO 시스템)

  • Lee, Ho-Jun;Lee, Jae-Woo;Lee, Jeong-Oog
    • Journal of the Korean Society for Aeronautical & Space Sciences
    • /
    • v.35 no.12
    • /
    • pp.1121-1128
    • /
    • 2007
  • MDO(Multidisciplinary Design and Optimization) can be applied for design of complex systems such as aircraft and SLV(Space Launch Vehicle). MDO System can be an integrated environment or a system, which is for synthetic and instantaneous analysis and design optimization in various design fields. MDO System has to efficiently use and integrate distributed resources such as various analysis codes, optimization codes, CAD, DBMS, GUI, and etc. in heterogeneous environments. In this paper, we present Web Services-based MDO System that integrates resources for MDO using Globus Toolkit and provides organic autonomous execution using automation technique such as Workflow system and agent. And also, it provides collaborative design environment through web user interfaces.

UI4GSD: Design and Implementation of User Interface for Grid Service Development Based on Globus Toolkit 4 (UI4GSD: 글로버스 툴킷 4 기반 그리드 서비스 개발을 위한 사용자 인터페이스의 설계 및 구현)

  • Kim, Hyuk-Ho;Lee, Pil-Woo;Kim, Yang-Woo
    • Journal of Internet Computing and Services
    • /
    • v.8 no.5
    • /
    • pp.45-58
    • /
    • 2007
  • This paper presents UI4GSD (User Interface for Grid Service Development) for grid service developers that provides an efficient and friendly development environment based on Globus Toolkit 4, Normally, implementing grid service requires special expert knowledge for Grid as well as programming, Moreover, grid service development as well as testing of the deployed service in the Globus container takes a long Time, which makes the grid service implementation very inefficient, However, UI4GSD can automatically generate a grid service interface file, a build file, and grid service class files as well as a client class file, using the information supplied by developers through GUI. In UI4GSD, a grid service is developed easily based on typical five step processes with required input data fed at each step. As, a result, UI4GSD can provide an easy and convenient development environment thereby increasing the efficiency and convenience in developing grid services.

  • PDF

Design and Implementation of a Globus-based Distributed Web Crawler Manager on Grid Environment (글로버스 기반 그리드 환경에서의 분산 웹 크롤러 매니저 설계 및 구현)

  • Kim, Hyuk-Ho;Lee, Seung-Ha;Park, Chan-Ho;Kim, Yang-Woo;Lee, Phil-Woo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2005.05a
    • /
    • pp.945-948
    • /
    • 2005
  • 그리드 정보검색 시스템은 일반적인 정보검색 시스템의 문제점과 한계점을 인식하고, 그리드라는 분산처리 환경을 기반으로 정보검색 시스템을 구축함으로써 보다 효율적이고 유연한 확장성을 갖는 정보검색 서비스를 제공한다. 본 논문에서는 그리드 시스템 환경에 맞게 그리드 미들웨어 중에 하나인 글로버스 툴킷(Globus Toolkit)을 이용하여 정보검색을 위한 가상 조직(VO: Virtual Organization)을 구성했다. 그리고 그리드 정보검색을 위한 전단계로 웹상에서 각종 정보를 수집하는 P2P 기반 분산 크롤러들을 관리하는 크롤러 매니저를 그리드 서비스로 설계 및 구현하여 그리드 정보검색 시스템에 존재하는 다른 서비스들과 함께 활용할 수 있도록 하였다.

  • PDF

A GRID Security System based on Proactive Authentification Information Service (선행적 인증 정보 서비스에 기반한 그리드 보안 시스템)

  • 권영도;서명구;장경일;남성진;박규석
    • Proceedings of the Korea Multimedia Society Conference
    • /
    • 2003.11b
    • /
    • pp.969-973
    • /
    • 2003
  • 지리적으로 분산되어 있는 이기종의 분산 컴퓨팅 자원과 대규모 데이터를 효과적으로 활용하기 위해서 최근에 GRID 컴퓨팅 환경에 대한 연구가 매우 활성화되고 있다. 이러한 GRID 환경을 구현하기 위해 필요한 부분중의 하나가 사용자와 자원간의 인증에 관련된 문제이다. 현재 Globus Toolkit은 PKI(Public Key Infrastructure)를 기본으로 하는 보안정책을 사용하고 있다. 이 정책은 인증과정에 적지않은 오버헤드가 발생되는 문제점을 가지고 있다. 이에 본 논문에서는 사용자와 자원간의 직접적인 인증으로 인해 발생하는 성능상의 비효율성을 줄이기 위해 사용자가 자원에 접속 하기전 AIS서버(Authentification Information Server)를 이용하여 미리 인증을 거친후, 자원에 접근한 때는 기 발급된 식별자로 인증 될 수 있도록 처리해주는 메커니즘을 제안한다.

  • PDF

Design and Implementation of Web-based Replica Manager for Data Grid (데이터 그리드 위한 웹 기반 Replica Manager의 설계 및 구현)

  • Kim, Eun-Sung;Park, Hyung-Woo;Lee, Sang-San;Chung, Jin-Wook
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2002.11a
    • /
    • pp.217-220
    • /
    • 2002
  • 데이터 그리드는 전 세계적인 데이터 공유를 목적으로 하는 그리드이다. 이를 위해서는 리플리카의 관리가 필수적이다. 본 논문에서는 이러한 리플리카의 효율적이고 수월한 관리를 위해서 글로버스 툴킷에서 제공하는 API 를 이용하는 웹 기반 Replica Manager 를 제안한다. 이 시스템을 통하여 많은 응용 과학자들이 자신의 실험 결과나 시뮬레이션 결과를 다른 사람들과 쉽게 공유할 수 있도록 함으로써 연구력 향상에 도움을 줄 것이라고 기대한다. 또한 이 시스템을 GPDK 에 통합함으로써 GPDK의 기능을 확장할 수 있을 것이라고 기대한다.

  • PDF

Grid IR System for Various Dynamic Reconfigurable VO (그리드 정보 검색 시스템을 위한 동적 가상조직 설계 및 구현)

  • Park, Chan-Ho;Kim, Hyuk-Ho;Lee, Seung-Ha;Kim, Yang-Woo;Lee, Phil-Woo
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2005.07a
    • /
    • pp.13-15
    • /
    • 2005
  • 현 그리드 정보검색 시스템은 그리드 환경에 구축이 되어 있지만, 그리드 컴퓨팅의 특징 중 하나인 가상조직을 이용한 자원 관리가 결여되어 있다. 이로 인해, 제공하는 서비스 중 한부분에서만 과부하가 발생을 하여도 시스템 전체에 영향을 미치게 된다. 이러한 문제에 대해 본 논문에서는 그리드라는 분산처리 환경에 정보검색 시스템을 구축하여 보다 안전하고, 유연한 확장성을 갖는 정보검색 서비스를 제공하려 한다. 대표적인 그리드 미들웨어인 글로버스 툴킷(Globus Toolkit)의 가상 조직(VO: Virtual Organization)을 이용하여 정보검색 시스템을 구성해 보고, 가상조직이 갖는 이점인 유연성을 그리드 정보검색에 적용하여, 유연한 그리드 정보 검색 시스템을 제안한다. 그리고 그리드 정보검색 가상 조직 관리 서비스(GIR-VOMS)를 구현하여 시스템 성능을 높여 줄수 있는지 알아본다.

  • PDF

Recording and Replay Service for a Grid-Based Hybrid Remote Experiment in Civil Engineering (그리드 기반의 토목공학 하이브리드 원격 실험의 리코딩 및 리플레이 서비스)

  • Jang, Sun;Lee, Jang-Ho
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2007.06b
    • /
    • pp.502-507
    • /
    • 2007
  • 그리드 컴퓨팅 기술을 기반으로 한 원격 실험 환경 구축에 있어서 원격 실험만큼이나 실험결과 데이터를 저장하고 재연하는 것이 중요하게 대두되고 있다. 본 논문에서는 KOCED 프로젝트의 건설 연구 실험시설 중 하나인 실시간 하이브리드 다자유도 실험시설에 대한 프로토타입인 원격 하이브리드 실험에 대하여 나라다 브로커링 이라는 발간 및 구독 패러다임의 스트리밍 서버와 글로버스 툴킷에 기반 한 리코딩 및 리플레이 서비스를 통하여 실험결과 데이터를 저장하고 재연하는 시스템을 구축 하였다. 기존에 진행된 실험결과를 검색하여 볼 수 있게 함으로써 중복된 실험으로 인한 비용을 줄이고, 사용자가 원하는 데이터에 대한 토픽정보를 통하여 재연함으로써 실험결과 데이터의 효용성을 높일 수 있을 것으로 판단된다.

  • PDF

Design and Implementation of Grid Information and Monitoring System (웹서비스 자원 프레임워크에 기반한 그리드 자원 정보 및 모니터링 시스템의 설계 및 구현)

  • Kwak, Jae-Hyuck;Lee, Pill-Woo
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2007.10b
    • /
    • pp.472-476
    • /
    • 2007
  • 그리드는 지역적으로 분산된 이기종 컴퓨팅 자원을 하나의 가상 컴퓨팅 환경으로 통합하는 차세대 분산 컴퓨팅 기술이다. 그러나, 그리드는 다양한 형태의 하드웨어 및 소프트웨어 자원을 포항하고 있기 때문에 이러한 자원의 이기종 특성은 그리드에 대한 자원 모니터링과 자원 정보 수집을 어렵게 만든다. 본 논문에서는 국제 그리드 표준을 준수하는 그리드 미들웨어인 글로버스 툴킷에 기반하여 그리드를 구성하는 다양한 하드웨어 및 소프트웨어에 대한 자원 정보를 통합하고 이를 제공할 수 있는 그리드 자원정보 및 모니터링 시스템을 설계 및 구현하였다.

  • PDF

Design of Unified Multi-Search Service Model based on Grid-IR Architecture (Grid-IR 아키텍처 기반의 통합 멀티 검색 서비스 모델 설계)

  • Hwang, Sung-bin;Kim, Hyuk-ho;Lee, Pil-Woo;Jung, Yong-Hwan;Kim, Yang-Woo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2008.05a
    • /
    • pp.613-616
    • /
    • 2008
  • 그리드는 분산된 이기종 자원을 활용하는 컴퓨팅 패러다임으로 초기 그리드 자원을 활용하기 위한 표준으로 OGSA(Open Grid Service Architecture)가 제안되었다. 글로버스 툴킷3은 사용자가 OGSA에 표준에 맞게 그리드를 구성할 수 있는 기능을 제공했다. 하지만 그 이후 웹 서비스 표준의 발전에 따라 그에 맞는 새로운 표준인 WSRF(Web Service Resource Framework)가 정의 되었고, 현재 WSRF 표준에 따라서 GT4가 개발되어 발표된 상황이다. 이에 본 논문에서는 기존의 OGSA 표준에 맞게 구축된 그리드 정보검색 서비스들을 WSRF 표준에 맞도록 새로운 표준 인터페이스를 정립하고, OGSA-DAI(Data Access & Integration) 컴포넌트를 통한 데이터 관리 기능을 추가함으로써 새로운 그리드 정보검색 서비스 프로토타입을 정의하고자 한다.