• Title/Summary/Keyword: 자동 수집

Search Result 1,076, Processing Time 0.026 seconds

자동제어 교육에서의 컴퓨터 소프트웨어 이용

  • 오준호
    • Journal of the KSME
    • /
    • v.28 no.2
    • /
    • pp.165-168
    • /
    • 1988
  • 컴퓨터는 그 자체만으로도 일반인의 흥미와 관심을 불러일으키기에 충분한 기자재이다. 이러한 컴퓨터를 자동제어 교육에 십분 활용함으로써 교육효과를 극대화시킬 수 있을 것이다. 이를 위하여 교육에 대한 과감한 투자로서 컴퓨터등 기자재를 과감히 확보하고 이를 활용함과 아울러 이에 따른 적절한 교과내용의 재검토가 이루어져야 할 것이다. 본 글에서는 주로 컴퓨터 시뮬 레이션 등 소프트웨어 활용에 대하여 주로 언급하였으나 이를 데이터수집 및 해석, 디지틀 제어 등 하드웨어로서의 컴퓨터 활용도 더욱 교육에 도입되어야 할 것이다.

  • PDF

Design and Implementation of Automated Twitter Data Collecting System : Focus on Environmental Data (자동화된 트위터 데이터 수집 시스템 설계 및 구현 : 환경 데이터를 중심으로)

  • Kim, Do-Hyung;Koo, Jahwan;Kim, Ung-Mo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2020.05a
    • /
    • pp.361-364
    • /
    • 2020
  • 소셜 네트워크 서비스의 사용자가 늘어나면서, 소셜 네트워크 서비스상에서 발생하는 빅데이터를 활용한 서비스가 늘어나고 있다. 소셜 네트워크 서비스 데이터는 실시간으로 생성되며, 따라서 데이터 수집 시스템 역시 자동화하여 준 실시간으로 데이터를 수집할 필요가 있다. 본 논문에서는 대표적인 소셜 네트워크 서비스인 트위터의 데이터를 지속적으로 수집하기 위한 자동 수집 시스템을 제안한다. 수집 시스템은 Twitter API 를 활용하는 Python 라이브러리를 통해 내용 및 메타데이터를 수집하며, 수집된 데이터를 재 검증한 뒤 저장한다. 또한 구현된 시스템에 환경 데이터를 주제로 하는 쿼리를 입력하여 실제 트위터 데이터를 수집하며 구현된 시스템을 검증해보았다.

Developing the Performance Analysis Model of the Heat-Shrink-Tube Manufacturing Process using a Simulation Method (시뮬레이션 기법을 통한 자동차용 열 수축 튜브 생산공정모델 개발)

  • Cho, Gyu-Sung;Lee, Seung-Hoon
    • Journal of the Korea Society for Simulation
    • /
    • v.19 no.4
    • /
    • pp.21-29
    • /
    • 2010
  • This research suggests a simulation model regarding the performance analysis of the Heat-Shrink-Tube manufacturing process using a simulation method. To analyze this study, firstly, we have collected the operating data from 'A' automobile parts company. Secondly, we have analyzed the collected data to apply a simulation model. Thirdly, we have developed a simulation model to experiment the process analysis and the line balancing methodology. The proposed simulation model can be executed by various input data without changing the simulation model and the performance of the Heat-Shrink-Tube Manufacturing system can be calculated by this model.

management and exploitation of ecological data in lakes and rivers (수생태계의 데이터수집과 활용)

  • KIM, Bomchul
    • Proceedings of the Korean Society for Information Management Conference
    • /
    • 2017.08a
    • /
    • pp.103-103
    • /
    • 2017
  • 생태학 분야에서는 생물의 분포, 변동, 서식환경요인의 변화, 등의 여러 종류의 데이터들이 수집되고 있는데 데이터의 형태가 다양하여 데이터의 관리와 활용형태도 다양하게 나타나고 있다. 근래에 들어 각 종 측정기기들이 개발되면서 생태조사 분야에서도 데이터의 양이 급증하는 시점에 있다. 수생태계 분야에서도 전통적인 생물상조사의 데이터는 크게 증가하지 않고 있지만 자동측정센서가 개발된 항목의 경우에는 데이터가 급증하는 단계에 있다. 수생태계에서 흔히 조사되는 플랑크톤의 군집구조 자료를 보면 하나의 조사대상 시료에서 출현하는 종의 수가 50 종정도에 이르며 각 개체의 종을 육안으로 확인하고 있으므로 종조성조사는 아직 자동화가 어렵다. 그러므로 플랑크톤 자료의 특성은 조사의 시료수(case)는 적고 측정항목(변수 variable)이 많은 특성을 가진다. 반면에 센서가 개발된 수질과 관련된 항목들은 자동측정설비가 확대되고 있어 변수는 적지만 장기간의 time series 들이 수집되고 있다. 녹조현상이 관심을 끌면서 여러 곳에 식물플랑크톤의 양을 측정하는 chlorophyll 센서가 설치되고 있는 것이 대표적인 사례이다. 그 외에 정량화되지 못하는 정성적 자료들도 수집되고 있으며 자료수집방법의 표준화도 미흡한 예가 많이 있고, 자료의 형태가 다양하여 데이터의 관리와 활용을 어렵게 한다. 환경부는 전국의 주요 하천 지점에서 정기적으로 수질을 측정하여 공개하고 있으며, 일부 지점에는 자동수질측정시설을 설치하여 측정의 빈도를 높이고 있다. 하천이나 호수에서 센서를 이용한 고빈도 모니터링은 그 동안 인지하지 못하였던 단기적 생태계 변화에 대해 새로운 정보를 제공하여 연구의 장르를 넓혀 가고 있다. 도시하천에서 산소를 측정한 사례를 보면 강우 시에 일시적으로 산소가 고갈되는 현상이 관찰되며, 부영양한 호수와 하천에서는 주야간 산소의 급격한 변동이 생태계 스트레스 요인으로 작용하고 있음을 알 수 있었다. 식물플랑크톤 센서의 연구에 의해 단기적인 변동이 크게 나타나고 있음이 새로이 밝혀지기도 하였다. 데이터의 수집과 활용도를 높이려는 노력도 이루어지고 있다. 과거에는 개인단위로 이루어지던 연구가 이제는 데이터를 수집하고 공유하는 플랫폼이 만들어 지면서 공동연구가 확대되고 있고, 국제적으로 지역을 초월하는 공동연구도 가능하게 되었다. 국제호수관측망학회(Global Lake Ecological Observatory Network, GLEON)이 그 사례이며 세계 여러 나라의 학자들이 참여하여 국제적으로 데이터를 공유하고 공동연구를 촉진하는 역할을 하고 있다. 생태계데이터의 증가는 생태학자들의 연구역량을 초과하는 데이터의 관리와 활용의 능력을 요구할 것이며 환경 생태 IT 분야의 융합연구의 필요성이 크게 대두되고 있다. 그간 데이터베이스의 구축에는 일부 성과가 있었으나 아직 수집된 데이터의 활용도를 높이고 타분야와의 협력연구 시너지를 확대하려는 노력은 부족하다. 이제는 데이터의 수집과 저장뿐 아니라 데이터의 활용도를 높일 수 있도록 학제적 협력연구를 촉진하는 off-line 모임도 확대할 때이다.

  • PDF

Study on Method Constructing Dialog Act Tagged Corpus for Dialog System in Car (차량용 대화 시스템을 위한 Dialog Act 태깅 코퍼스 구축 방법 연구)

  • Choi, Sung-Kwon;Kwon, Oh-Woog;Kim, Young-Gil
    • Annual Conference on Human and Language Technology
    • /
    • 2012.10a
    • /
    • pp.181-184
    • /
    • 2012
  • 본 논문에서는 한국전자통신연구원 언어처리연구팀에서 개발하고 있는 차량용 대화 시스템을 위한 Dialog Act 태깅 코퍼스 구축 방법에 대해 기술하는 것을 목표로 한다. 차량용 태깅 코퍼스 구축 방법은 크게 차량용 대화 코퍼스 수집과 수집된 대화 코퍼스에 Dialog Act를 반자동으로 태깅하는 방법으로 나눌 수 있다. 차량용 대화 코퍼스 수집은 1) 대화플랜 맵 구축, 2) 표준대화 구축, 3) 자유대화 구축, 4) 사용자 발화에 패러프래징 발화 구축의 순으로 구축되었다. Dialog Act 태깅은 수집된 대화코퍼스로부터 슬롯 후보를 추출하여 슬롯 체계를 구축한 후 반자동 슬롯 태깅을 실시하고, 슬롯 태깅 결과와 Dialog Act Type을 조합하여 Dialog Act 태깅 코퍼스를 구축하였다. 이렇게 구축된 Dialog Act 태깅 코퍼스는 차량 공조시스템(에어컨, 히터 등) 및 차량 응급 조치 정보 서비스와 같은 차량용 대화 시스템에 적용 중에 있다.

  • PDF

A Design and Implementation of Web Robot by Using Genre-based Categorization and Subject-based Categorization (장르기반 분류와 주제기반 분류를 이용한 웹 로봇의 설계 및 구현)

  • Lee Yong-Bae
    • The KIPS Transactions:PartB
    • /
    • v.12B no.4 s.100
    • /
    • pp.499-506
    • /
    • 2005
  • It still has some restrictions to collect a specialized information with only the function of existing web robot which collect an enormous of data by circulating through the internet. Therefore, in this paper the functions of the current web robot and its application areas are analyzed and the limitations of collecting a specialized information are found out. Also we define what functions are necessary for a web robot in order to collect a specialized information. Then the designed structure is described. There are two critical functions which are applied to web robot. One is a genre-based categorization that classifies the text by the type, and the other is a content-based categorization by the subject. Most of all, genre-based categorization is used as fundamental feature which enables web robot to collect the aimed documents efficiently.

Korean Web Content Extraction using Tag Rank Position and Gradient Boosting (태그 서열 위치와 경사 부스팅을 활용한 한국어 웹 본문 추출)

  • Mo, Jonghoon;Yu, Jae-Myung
    • Journal of KIISE
    • /
    • v.44 no.6
    • /
    • pp.581-586
    • /
    • 2017
  • For automatic web scraping, unnecessary components such as menus and advertisements need to be removed from web pages and main contents should be extracted automatically. A content block tends to be located in the middle of a web page. In particular, Korean web documents rarely include metadata and have a complex design; a suitable method of content extraction is therefore needed. Existing content extraction algorithms use the textual and structural features of content blocks because processing visual features requires heavy computation for rendering and image processing. In this paper, we propose a new content extraction method using the tag positions in HTML as a quasi-visual feature. In addition, we develop a tag rank position, a type of tag position not affected by text length, and show that gradient boosting with the tag rank position is a very accurate content extraction method. The result of this paper shows that the content extraction method can be used to collect high-quality text data automatically from various web pages.

상수도 원격자동검침시스템에 관한 연구

  • Seo, Chang-Gap;Park, Yeong-Jae;Jeong, Gwang-U
    • 한국경영정보학회:학술대회논문집
    • /
    • 2007.06a
    • /
    • pp.1036-1042
    • /
    • 2007
  • 현재 우리나라 상수도 시스템의 경우 대부분 각 가정집에 설치된 계량기의 측정값을 검침원이 육안으로 확인, 수기 기입 방법으로 수도 검침이 이루어지고 있다. 이러한 방법은 사생활 침해 및 범죄로 이어질 가능성이 있다. 본 논문에서는 상수도의 검침데이터를 무선주파수 및 코드분할다중접속방식을 사용하여 송수신 가능한 네트워크 망을 구축, 수신된 데이터 값을 활용하여 각 상수도 수용가의 사용량을 자동으로 검침하여 청구 내역서까지 작성해 주는 상수도 자동검침시스템을 소개한다. 상수도 자동검침시스템은 검침을 디지털화하고 이를 무선송신 가능한 검침기와 검침기의 검침데이터 값을 송수신 할 수 있는 중계기 및 집중기, 그리고 CDMA 망을 통한 검침데이터를 수신할 수 있는 애플리케이션 서버 등을 구축하여 지역 내 원격 검침 네트워크 망을 구축하는 것을 포함하고 있다. 본 연구의 시스템은 화재, 가스, 전기 등의 검침데이터를 통합으로 수집하여 데이터를 관리하는 통합 시스템으로 확대가 용이하며 이러한 상수도 자동검침시스템은 누수 및 독거노인 등의 생활보호대상자의 안전을 확인하는 기초 정보로도 활용할 수 있다.

  • PDF

A Study on the System Development for Automatic Webtoon Download and Feature Registration (웹툰 저작물 자동 수집 및 특징점 등록 시스템 개발에 관한 연구)

  • Yoon, Hee-Don;Kim, Tae-Hyun;Kang, Ho-Gab;Cho, Seong-Hwan
    • The Journal of the Institute of Internet, Broadcasting and Communication
    • /
    • v.17 no.2
    • /
    • pp.25-31
    • /
    • 2017
  • This paper aims to develope the technology for monitoring and identifying webtoon works that are being illegally distributed through the web-hard, torrent and overseas websites. The technology is to effectively prevent the illegal distribution and protect the copyrights of the webtoon works, leading to create a healthy market. This paper deals with the technology for (a) automatic collection of webtoon works from the webtoon service sites, (b) extraction of the features from the images of the collected webtoon works, and (c) registers them in the feature database. For these purposes, the required system performance and features were analyzed and the structures of webtoon service sites were examined, through which the system for automatic registration of webtoon works and features was developed. The system can work for the early stage blockage of illegal distributions of webtoon works which occur during the period from webtoon posting to feature registration.

Automatic Text Categorization based on Semi-Supervised Learning (준지도 학습 기반의 자동 문서 범주화)

  • Ko, Young-Joong;Seo, Jung-Yun
    • Journal of KIISE:Software and Applications
    • /
    • v.35 no.5
    • /
    • pp.325-334
    • /
    • 2008
  • The goal of text categorization is to classify documents into a certain number of pre-defined categories. The previous studies in this area have used a large number of labeled training documents for supervised learning. One problem is that it is difficult to create the labeled training documents. While it is easy to collect the unlabeled documents, it is not so easy to manually categorize them for creating training documents. In this paper, we propose a new text categorization method based on semi-supervised learning. The proposed method uses only unlabeled documents and keywords of each category, and it automatically constructs training data from them. Then a text classifier learns with them and classifies text documents. The proposed method shows a similar degree of performance, compared with the traditional supervised teaming methods. Therefore, this method can be used in the areas where low-cost text categorization is needed. It can also be used for creating labeled training documents.