• Title/Summary/Keyword: 자동수집

Search Result 1,072, Processing Time 0.042 seconds

The Development of Automatic Collection Method to Collect Information Resources for Wed Archiving: With Focus on Disaster Safety Information (웹 아카이빙을 위한 정보자원의 자동수집방법 개발 - 재난안전정보를 중심으로 -)

  • Lee, Su Jin;Han, Hui Lyeong;Sim, Min Jeong;Won, Dong Hyun;Kim, Yong
    • Journal of Korean Society of Archives and Records Management
    • /
    • v.17 no.4
    • /
    • pp.1-26
    • /
    • 2017
  • This study aims to provide the efficient sharing and utilization method of disasters scattered by each institution and develop automated collection algorithm using web crawler for disaster information in deep web accounts. To achieve these goals, this study analyzes the logical structure of the deep web and develops algorithms to collect the information. With the proposed automatic algorithm, it is expected that disaster management will be helped by sharing and utilizing disaster safety information.

A Method for Implicit Rating Information Collection using Content Hierarchy (컨덴츠 계층구조를 이용한 평가정보 자동 수집방법)

  • 이준훈;김영지;문현정;우용태
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2002.04b
    • /
    • pp.151-153
    • /
    • 2002
  • 전자상거래에서 추전시스템은 사용자들의 관심도에 따라 사용자에게 개인화된 아이템이나 상품을 제안한다. 보통의 추천시스템은 추천의 정확성을 높이기 위하여 사용자로부터 명시적으로 수집한 평가정보를 이동하였다. 그러나 명시적인 평가정보 수집방법은 사용자로부터 충분한 평가정보를 제공받지 못하여 추천이 어려울 수 있다. 최근에는 명시적으로 평가정보를 수집하지 않고 묵시적으로 평가정보를 수집하는 추천시스템에 관한 연구가 활발하게 진행되고 있다. 이러한 묵시적인 평가정보의 장점은 로든 사용자에 대한 평가정보를 자동적으로 수집할 수 있으며, 사용자는 정보를 이용하는 것 이치의 부가적인 일을 수행할 필요가 없다는 점이다. 본 논문에서는 인터넷사이트에서 계층적으로 구성된 컨텐츠에 대한 사용자의 단계적인 반응도에 따라 자동적으로 평가정보를 수집하기 위한 기법을 제안하고 효율을 측정하였다.

  • PDF

Collecting and Analyzing Personal Software Process Data in Web Application Development (웹 애플리케이션 개발에서의 개인 프로세스 데이터 수집 및 분석을 위한 도구)

  • Shin, Hyun-Il;Choi, Ho-Jin
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2006.11a
    • /
    • pp.539-542
    • /
    • 2006
  • Personal Software Process (PSP)에서 개인 개발자들이 수행해야 되는 측정 및 분석 활동이 제시된다. 측정 및 분석 활동의 일관되고 지속적인 수행으로 개발자들은 소프트웨어 품질 향상, 보다 정확한 예측, 개인 역량의 객관적인 평가, 개인 프로세스의 정량적 관리 등의 이득을 얻을 수 있다. 측정 및 분석 활동에서 신뢰성 있는 데이터의 수집이 무엇보다 중요하다. 하지만, 데이터 수집의 높은 오버헤드(overhead)와 컨텍스트 스위칭(context switching)의 문제로 인하여 신뢰성 있는 데이터의 수집에 많은 어려움이 존재한다. 이러한 어려움을 감소시키기 위해 자동 데이터 수집 및 분석 기법이 연구되어 왔다. 본 논문에서는 기존의 자동 데이터 수집 및 분석 기법을 확장하여 웹 애플리케이션 개발에서의 개인 프로세스 데이터를 자동 수집 및 분석 하는 도구를 설명한다.

  • PDF

Study of Automated Quality Check of Hydrological Water Level Data (수위자료 이상치 자동점검 기법 개선에 대한 연구)

  • Park, Heeseong;Kim, Hyung Seop
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2019.05a
    • /
    • pp.192-192
    • /
    • 2019
  • 수위자료는 기초수문자료의 하나로서 자료 수집시 이에 대한 품질관리가 반드시 필요하다. 이에 우리나라 환경부에서는 국가수문자료 품질관리시스템을 개발하여 실시간으로 수집되는 수위자료의 품질을 관리하고 있다. 국가수문자료 품질관리시스템은 실시간으로 수집되는 수위자료의 품질을 수작업으로 검토하기 이전에 편의를 위해 수문자료의 품질(오류가 있는 자료인지 아닌지)을 자동으로 구분하는 프로세스를 적용하고 있다. 이러한 자동점검 기법은 실무자에 의한 수문자료의 검토 및 보완 작업을 돕기 위한 것으로 실무자가 집중해서 관리해야할 것과 아닌 것을 쉽게 판단할 수 있도록 하는 보조적인 역할을 하고 있으며, 간단한 통계에 의한 기준을 적용하여 활용하고 있는 수준이다. 본 연구에서는 수위자료 이상치를 자동으로 점검할 수 있는 기법을 개선하기 위하여 10분단위로 관측된 수위자료에 대해 다양한 통계적인 기법을 적용하여 이상치를 찾을 수 있는 방법을 고안하고, 기존의 방법과 결과 등을 비교하여 보았다. 이를 통해 향후 국가수문자료의 품질관리업무 효율을 향상시킬 수 있는 정교한 이상치 자동점검기법을 개발 할 수 있을 것으로 기대한다.

  • PDF

Design and Implementation of a User Activity Auto-recognition System based on Multimodal Sensor in Ubiquitous Computing Environment (유비쿼터스 컴퓨팅환경에서의 Multimodal Sensor 기반의 Health care를 위한 사용자 행동 자동인식 시스템 - Multi-Sensor를 이용한 ADL(activities of daily living) 지수 자동 측정 시스템)

  • Byun, Sung-Ho;Jung, Yu-Suk;Kim, Tae-Su;Kim, Hyun-Woo;Lee, Seung-Hwan;Cho, We-Duke
    • 한국HCI학회:학술대회논문집
    • /
    • 2009.02a
    • /
    • pp.21-26
    • /
    • 2009
  • A sensor system capable of automatically recognize activities would allow many potential Ubiquitous applications. This paper presents a new system for recognizing the activities of daily living(ADL) like walking, running, standing, sitting, lying etc. The system based on the state-dependent motion analysis using Tri-Accelerometer and Zigbee tag. Two accelerometers are used for the classification of body and hand activities. Classification of the environment and instrumental activities is performed based on the hand interaction with an object ID using.

  • PDF

Development of Malware Management System (악성코드 통합 관리 시스템 개발)

  • Kang, Hong-Koo;Jeong, Hyun-Cheol
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2012.06c
    • /
    • pp.289-291
    • /
    • 2012
  • 최근 신종/변종 악성코드 유포가 급증하고 있어 대량의 악성코드 수집/분석 및 경유/유포지 탐지를 위한 자동화 기술 연구가 활발하다. 대표적인 연구로서 웹과 SNS를 통해 유포되는 악성코드에 대한 자동수집 시스템, 대량의 악성코드에 대한 자동 동적/정적 분석 시스템, 시그니처 기반 악성코드 경유/유포지 탐지 시스템이 있다. 이들 연구에서 개발된 시스템들은 상호 독립적으로 관리가 가능하지만 악성코드에 대한 체계적이고 종합적인 분석 및 현황 파악을 위해서는 악성코드 정보를 통합 관리할 수 있는 시스템이 요구된다. 본 논문에서는 기존 연구에서 개발된 악성코드 자동 수집 시스템, 악성코드 자동 분석 시스템, 악성코드 경유/유포지 탐지 시스템에서 생성된 악성코드 정보를 통합 관리할 수 있는 악성코드 통합 관리 시스템을 제안한다.

A Method of Selective Crawling for Web Document Using URL Pattern (URL 패턴을 이용한 웹문서의 선택적 자동수집 방안)

  • Jeong, Jun-Yeong;Jang, Mun-Su
    • Proceedings of the Korean Institute of Intelligent Systems Conference
    • /
    • 2007.11a
    • /
    • pp.41-44
    • /
    • 2007
  • 특정 분야별로 구축되는 온톨로지에 관하여 그 언스턴스를 쉽고 빠르게 구축하기 위해서는 구조화된 문서를 이용하는 것이 효율적이다. 그러나, 일반적인 웹 문서는 모든 분야에 대하여 다양한 형식으로 표현되어 존재하기 때문에, 대상이 되는 구조 문서를 자동으로 수집하기는 쉽지 않다. 본 논문에서는 웹사이트의 URL 패턴을 XML 기반의 스크립트로 정의하여, 필요한 웹 문서만을 지능적으로 수집하는 방안을 제안한다. 제안하는 수집 방안은 구조화된 형태로 정보를 제공하는 사이트에 대해서 매우 빠르고 효율적으로 적용될 수 있다. 본 논문에서는 제안하는 방법을 적용하여 5만개 이상의 웹 문서를 수집하였다.

  • PDF

Energy big data analysis and classification software based on machine learning (부하별 에너지 빅데이터 분석 소프트웨어 시스템)

  • Kang, Jeonghoon;Yoo, June-Jae;Choi, Hyoseop;Lee, Taewoo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2018.05a
    • /
    • pp.54-55
    • /
    • 2018
  • 본 논문은 지속적으로 수집되는 전력량계 데이터를 자동으로 처리, 분석하기 위한 IoT 데이터 기반 자동분석 기법을 제시한다. 에너지 효율을 높이기 위해서는 대상 설비의 관리, 모니터링을 통해 운영을 최적화해야 한다. IoT 기술을 이용하여 에너지 설비 사용 효율을 확인하고, 관리 여부를 판단하는 진단기술을 구현하기 위해서는, IoT 전력량계를 통해 수집된 데이터를 다양한 머신러닝 알고리즘에 입력하여 관리에 필요한 결과 지표를 도출할 수 있어야 한다. 이런 기능을 제공하는 IoT 수집 시스템의 모니터링 및 자동 진단 시스템은 데이터 수집, 분석을 신속하게 수행할 수 있다. 데이터 수집과 고속, 대용량 데이터 저장에 적합한 분산 파일시스템과 고속 시계열 기능을 기반으로 의존도, 유사도 분석실행을 제공하는 고속 전처리 시스템의 특징을 제안한다.

An Implementation of Control Command Acquisition System for Analysis of Abnormal Behavior (이상행위 분석을 위한 제어명령 수집 시스템 구현)

  • Lee, Jin-Heung;An, Pa-Ul
    • Proceedings of the Korean Society of Computer Information Conference
    • /
    • 2019.01a
    • /
    • pp.137-140
    • /
    • 2019
  • 본 논문에서는 자동 제어 시스템의 이상행위를 분석하기 위하여 MODBUS 프로토콜 기반의 제어 명령을 수집 분류하여 등록된 화이트리스트 기반으로 이를 탐지하는 시스템을 구현하였다. 구현 시스템은 자동 제어 시스템 기반으로 다양한 생산설비를 동작시키는 스마트팩토리 시스템을 비롯하여 국가기간 산업에 활용 가능하며, 생산설비의 이상 작동을 확인하기 위하여 생산설비의 동작 신호를 주기적으로 수집 분석하여 정상적인 작업형태에서 벗어나는 이상 작업을 판단할 수 있도록 구성하였다. 또한, 소형화된 공장 자동화 설비를 구성하여 실제 스마트팩토리 환경에서 제어명령을 수집하고, 수집된 신호로부터 이상 작동을 검출하는 제안 시스템의 구현 결과를 설명한다.

  • PDF

Design and Construction Strategy for Disaster and Safety Record Information Resources Archives Based on Automatic Acquisition (자동수집 기반 재난안전 기록정보자원 아카이브 설계 및 구축전략)

  • Han, Hui Jeong;Gang, Ju-Yeon;Kim, Yong;Oh, Hyo-Jung
    • Journal of Korean Society of Archives and Records Management
    • /
    • v.17 no.4
    • /
    • pp.127-154
    • /
    • 2017
  • Large-scale and complex disasters have frequently occurred all over the world recently, and they are repeated every year. Accordingly, the need for the systematic management and utilization of raw-data and processing information in the past has increased. For this purpose, this study proposed a construction strategy for disaster and safety record information resources archives based on automatic acquisition, which can be used as a hub for disaster and safety information. Based on local and foreign case studies, several consideration factors for building the archives are determined. Finally, this study proposed four steps for constructing the archives. These are as follows: 1) complete enumeration survey of the disaster and safety record information resources, 2) automatic acquisition possibility study, 3) selection of the resources for preservation, and 4) automatic acquisition of metadata. The construction of the archives proposed in this study will facilitate integrated management, sharing, and use of scattered information resources on disaster and safety.