• 제목/요약/키워드: Amount of collection

검색결과 529건 처리시간 0.025초

Implementation of Efficient Distributed Crawler through Stepwise Crawling Node Allocation

  • Kim, Hyuntae;Byun, Junhyung;Na, Yoseph;Jung, Yuchul
    • 한국정보기술학회 영문논문지
    • /
    • 제10권2호
    • /
    • pp.15-31
    • /
    • 2020
  • Various websites have been created due to the increased use of the Internet, and the number of documents distributed through these websites has increased proportionally. However, it is not easy to collect newly updated documents rapidly. Web crawling methods have been used to continuously collect and manage new documents, whereas existing crawling systems applying a single node demonstrate limited performances. Furthermore, crawlers applying distribution methods exhibit a problem related to effective node management for crawling. This study proposes an efficient distributed crawler through stepwise crawling node allocation, which identifies websites' properties and establishes crawling policies based on the properties identified to collect a large number of documents from multiple websites. The proposed crawler can calculate the number of documents included in a website, compare data collection time and the amount of data collected based on the number of nodes allocated to a specific website by repeatedly visiting the website, and automatically allocate the optimal number of nodes to each website for crawling. An experiment is conducted where the proposed and single-node methods are applied to 12 different websites; the experimental result indicates that the proposed crawler's data collection time decreased significantly compared with that of a single node crawler. This result is obtained because the proposed crawler applied data collection policies according to websites. Besides, it is confirmed that the work rate of the proposed model increased.

삼지구엽초의 채취시기(採取時期) 및 산지별(産地別) 성분(成分) 차리(差異) (Difference in Components of Epimedium koreanum in Compliance with Seasons and Places of Collection)

  • 신국현;임순성;안상득;김승경;박경열
    • 한국약용작물학회지
    • /
    • 제4권4호
    • /
    • pp.321-328
    • /
    • 1996
  • 삼지구엽초의 번식과 재배법을 개발하여 자생지에서의 남획과 자연 소멸을 막는 동시에 양질의 삼지구엽초 생약을 확보하긴 위한 일련의 실험중 채취시기 및 생산지에 따른 주요성분의 함량차를 비교 검토하였던바 채취시기에 따라서는 여름보다는 가을(9월 증순)에 채취한 것이 icariin성분이 월등히 높았고, 재배산과 자연산간에는 자연산이 약간 높은 경향이었다. 한편 철원지역에서 채취한 지구엽초(0.94%)에 비해 중국산(0.4%)의 icariin함량은 절반수준에 불과하여 삼지구엽초는 채취시기 및 장소에 따라 품질의 차이 가 큰 것으로 사료된다.

  • PDF

TCS데이터를 이용한 이상치제거 및 결측보정 알고리즘 개발 (Outlier Filtering and Missing Data Imputation Algorithm using TCS Data)

  • 도명식;이향미;남궁성
    • 대한교통학회지
    • /
    • 제26권4호
    • /
    • pp.241-250
    • /
    • 2008
  • 지능형 교통체계구축과 교통 혼잡이 증가하면서 이용자는 과거보다 양질의 통행시간정보를 요구하고 있다. 기존 연구에서는 단속류, 연속류 모두 AVI검지기 자료를 이용한 이상치제거 및 통행시간 산출에 대한 연구가 많이 이루어져왔다. 현재 한국도로공사에서는 TCS(Toll Collection System)를 기반으로 정보제공을 준비 중에 있으며, TCS 데이터는 운전자가 실제교통상황을 경험한 동적특성을 가진 통행시간이 수집된 자료로 통행시간 추정자료로 잠재력이 크다. 그러나 '시간처짐현상'이 발생하고 속도위반, 휴게소, 고장 등으로 인해 평균통행시간보다 작거나 큰 이상치와 결측데이터가 존재하여 기존 방법을 적용하는데 효과적이지 못한 것으로 나타났다. 따라서 본 연구에서는 TCS 데이터에 맞는 이상치제거 및 결측보정 알고리즘을 개발하였다. 기존알고리즘과 비교한 결과 개발 알고리즘이 더 효과적인 것으로 나타났다.

데이터 수집 장치를 이용한 유도탄 구동장치 점검 제안 (Proposal for guided missile actuator device inspection using data acquisition device)

  • 정의재;오택근;이정민;유필중
    • 한국항행학회논문지
    • /
    • 제27권4호
    • /
    • pp.423-428
    • /
    • 2023
  • 유도탄 구동장치는 구동장치 날개 펼침 시간과 위치가 유도탄의 초기 기동에 매우 중요한 요소가 되며, 유도탄 구동장치 점검은 구동 동작 수집 데이터 획득 정확성과 실시간성이 보장되어야 한다. 본 연구에서는 기존 구동장치 점검 설계 및 구현방식과 데이터 수집장치 구동장치의 설계 구현방식 차이를 비교하고, 데이터 수집량, 실시간 데이터 수집 성능 차이를 획득 후 비교하였으며, 시험을 통해 나타난 데이터를 그래프로 변환한다. 획득된 데이터 구동장치 파형을 비교 분석하고, 분석된 데이터를 기반으로 기존 구동장치 점검과 데이터 수집장치 점검 중 실시간 응답 속도와 안정성이 보장된 데이터 수집장치 점검구성을 제안한다.

학교 쓰레기 처리현황과 개선에 관한 연구 - 서울시 공립 초.중등학교를 대상으로 - (A Study of School Waste Disposal Status and Its Reforms (Public Primary and Secondary Schools in Seoul))

  • 노성빈
    • 한국환경교육학회지:환경교육
    • /
    • 제3권1호
    • /
    • pp.130-140
    • /
    • 1992
  • The purpose of this study was to survey the trends of waste products in schools, its gathering and disposal, identification of problems and to analyze its disposal. Moreover, this study was aimed at basic suggestions about the establishment and plans of waste environmental education. 98 public primary and secondary schools were surveyed in Seoul during the month of March and April, 1991. Information was collected from each educational association by random sampling. Questionaries were used for this survey. To understand the disposal status of school waste and its reforms, this study surveyed the amount of waste by products, their origin and analyzed the disposal by type, one number of schools and teachers involved. The dump sited and disposal methods of school waste, its problems, and the status of school waste educations were researched, and ideal disposal methods and plans for waste education were suggested. The results were as follows. 1. The School's trash was produced by followings: paper, vinyle plastics, food, woods, metals, ceramics, glass, bottles, and ash from the heating system. The biggest cause of the school's waste as shown by the survey was a lack of environmental awareness(39.8%). The second biggest was the use of a one time use of disposable paper products(27.6%). 2. Waste collection by different grade levels were proven to be important but as you move from elementary to high school, the waste collecting operation decreased, in this connection between the students and waste collection itself it was significant on the other hand the teachers were not working as significant variables. 3. Of the school that collected waste 69.5 percent of the schools separately grouped common waste and recyclable waste. 25 schools(42.4%) received improvement on their environmental awareness of trash collection through this method. 4. From the number of disposal sites in surveyed schools, it was determined that the education of the necessity for separation of waste was performed in vain and accordingly the should require a real education in the future. 5. Regarding the method of disposal of waste the survey indicated that the #1 method of disposal was partial burning and the remains carried to a dump site by others(35,7%). In elementary schools the entire waste was taken by individuals to a dump site (33.3%). In high schools partial burning and then transported by individuals #1 in our survey(50%). 6. Relative to the problem of the treatment to waste, the emission of smoke from the burning was considered to be the #1 priority in our survey (62.3%) the problem of trash collection being delayed was 52.1%(1in our survey). 7. The present situation of environmental education of waste us lacking. Under present circumstances, the practice of public announcements for improvement and waste-paper collection has been going on vigorously but lacking in education as to the preparation of compositions for students the themes of public exhibitions, the organizing of voluntary associations should be part of the education system to reinforce student's awareness of proper waste disposal. 8. The most economical alternative for disposal was recycling usable waste or combustible material through a variety of education we can therefore educate students bring this education to their homes public servants will also be able to benefit in the waste disposal process with proper education. In conclusion we should intensify the systemical organization and the education of our waste disposal for a better environment.

  • PDF

Enhanced ${\varepsilon}$-Poly-$_L$-lysine Production from Streptomyces ahygroscopicus by a Combination of Cell Immobilization and In Situ Adsorption

  • Liu, Shengrong;Wu, Qingping;Zhang, Jumei;Mo, Shuping;Yang, Xiaojuan;Xiao, Chun
    • Journal of Microbiology and Biotechnology
    • /
    • 제22권9호
    • /
    • pp.1218-1223
    • /
    • 2012
  • ${\varepsilon}$-Poly-$_L$-lysine (${\varepsilon}$-PL), produced by Streptomyces or Kitasatospora strains, is a homo-poly-amino acid of $_L$-lysine, which is used as a safe food preservative. The present study investigates the combined use of cell immobilization and in situ adsorption (ISA) to produce ${\varepsilon}$-PL in shaken flasks. Loofah sponge-immobilized Streptomyces ahygroscopicus GIM8 produced slightly more ${\varepsilon}$-PL than those immobilized on synthetic sponge, and sugarcane bagasse. Moreover, loofah sponge supported the maximum biomass. Hence, loofah sponge was chosen for cell immobilization. Meanwhile, the ion-exchange resin D152 was employed for ISA. The loofah sponge-immobilized cells produced $0.54{\pm}0.1g/l$ ${\varepsilon}$-PL, which significantly increased to $3.64{\pm}0.32g/l$ after combining with ISA through the addition of resin bags. The free cells with ISA using the dispersed resin yielded $2.73{\pm}0.26g/l$ of ${\varepsilon}$-PL, an increase from $0.82{\pm}0.08g/l$. These data illustrate that the proposed combination method improved production most significantly compared with either immobilization or ISA only. Moreover, the immobilized cells could be repeatedly used and an ${\varepsilon}$-PL total amount of $8.05{\pm}0.84g/l$ was obtained. The proposed combination method offers promising perspectives for ${\varepsilon}$-PL production.

국내 재활용품 선별시설에서 선별 현황 및 개선방안 (Investigation on Sorting Efficiency for Recyclable Materials and Its Improvement Measure at Domestic Sorting Facility)

  • 김주신;박대원
    • 유기물자원화
    • /
    • 제25권2호
    • /
    • pp.15-26
    • /
    • 2017
  • 본 연구는 S시 S구의 재활용품 배출특성을 조사 및 분석을 통해 재활용품 선별장에서 재활용품 선별율을 조사하였다. 재활용품 배출특성을 조사하기 위해서 발생원, 수집운반, 선별단계별로 나누어 분석하였다. 분석결과, 재활용품의 발생량 원단위의 전체 평균은 0.121kg/일 인, 지역별 재활용품의 수거주기는 보통 주3회(월수금 혹은 화목일)로 나타났으며, 차량별 혼합재활용품의 밀도는 평균 $202.4kg/m^3$로 나타났다. 선별단계에서의 현황분석을 진행한 결과, 혼합재활용품의 반입량은 평균 1,154.6톤/달, 겉보기밀도의 평균은 $181kg/m^3$, 선별재활용품의 양은 평균 448.5kg/달, 잔재물의 밀도는 $48kg/m^3$으로 나타났다. 선별장으로 입고된 혼합재활용품에서 유가품 선별율은 약 38.85%이며 잔재물은 약 55.90%로 나타났다. 전체 잔재물 7,744.8톤 중 유가품은 약 4,272.1톤이 존재하는 것으로 나타났다. 활용가능한 유가품의 수거효율을 높이기 위한 방안으로는 거점수거 활성화, 선별시설 자동화 및 현대화, 잔재물의 자원화 등이 검토되었다.

부상분리 기술을 이용한 현장형 조류수거시스템의 발전 과정 및 개발 방향 (Development History and Direction of On-site Algae Collecting System with Flotation Technology)

  • 김종익;한인섭;매계문;조종주;정순우
    • 대한환경공학회지
    • /
    • 제39권4호
    • /
    • pp.194-200
    • /
    • 2017
  • 현장형 조류수거시스템(이하 OACS)은 녹조 현상이 심각할 때 긴급 대책으로 투입되는 대안 중의 하나로, 대규모 수역에 투입되는 OACS가 갖추어야 할 조건은 신속대응성, 효율성 및 대용량이다. 부상분리 기술을 이용한 OACS의 성능은 부상 포집 수거 공정의 효율에 의해 결정되며, 처리용량 및 효율성에 가장 중요한 인자는 포집과 수거이다. 이들이 자동화되면 전체 작업속도와 일일 처리수량이 증가한다. OACS에 적용된 기술은 진보될수록 장비의 단순화 소형화와 포집과 수거 공정 자동화가 발전하여 신속대응성과 효율성이 향상되었으며, 잔류슬러지를 크게 줄여 친환경성과 수질 지속효과를 향상시켰고, 슬러지 수거량도 증가하여 대용량이 실현되는 방향으로 개선되었다. 그 결과 시스템은 조류증식비율을 극복할 수 있는 조류제거량을 달성할 수 있었고, 처리용량 대비 운영비가 감소되어 기술의 경제성을 크게 향상시켰다.

종량제 가격이 생활폐기물, 음식물쓰레기, 재활용품 수거서비스 수요에 미치는 영향 (The Impact of Unit Pricing System on the Demand for Solid Waste Disposal, Food Waste Disposal, and Recyclables)

  • 홍성훈
    • 자원ㆍ환경경제연구
    • /
    • 제24권4호
    • /
    • pp.747-761
    • /
    • 2015
  • 본 연구에서는 2006-2013년 기간의 생활폐기물 관련 자료를 사용하여 종량제봉투 가격이 각 처리유형별 생활폐기물의 수거서비스 수요에 미치는 영향을 조사하였다. 생활폐기물 수거서비스 수요에 영향을 미치는 다른 변수들을 통제하고 관찰되지 않는 지역 및 시간적 특성들의 영향을 통제하기 위해 지역 및 시간 고정효과모형으로 각 처리유형별 수거서비스 수요함수를 추정하였다. 추정결과 종량제봉투 가격의 상승은 비탄력적이지만 종량제봉투에 의한 비음식물류 생활폐기물의 수거서비스 수요를 감소시키는 것으로 나타났다. 또한 종량제봉투 가격의 상승은 음식물쓰레기 배출량을 증가하도록 하고 상대적으로 다른 수거서비스 수요에 비해서 재활용품 배출량의 증가에 강하게 영향을 미치는 것으로 나타났다. 이러한 결과는 종량제봉투 가격의 상승에 따른 비음식물류 생활폐기물에 대한 수거서비스 수요의 감소는 음식물쓰레기와 재활용품의 분리수거의 증가에 기인하는 것임을 시사한다. 그러나 종량제봉투 가격의 상승이 1인당 총생활폐기물 발생량을 증가시키는 것으로 나타나고 있어 음식물쓰레기 및 재활용품의 분리배출 증가와 잠재적인 불법투기 및 소각을 고려한 피드백 효과로 인해 생활폐기물의 발생을 원천적으로 감소하도록 하기보다는 오히려 증가하도록 하는 결과를 낳고 있는 것으로 보인다.

Solar-CTP : 모바일 싱크 기반 태양 에너지 수집형 무선 센서 네트워크를 위한 향상된 CTP (Solar-CTP : An Enhanced CTP for Solar-Powered Wireless Sensor Networks Using a Mobile Sink)

  • 정석현;강민재;노동건
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제9권4호
    • /
    • pp.77-82
    • /
    • 2020
  • 무선 센서 네트워크(WSN)는 제한된 배터리 자원으로 인해 수명이 짧다는 근본적인 문제뿐 아니라, 고정된 위치의 싱크로 인한 싱크 주변 노드의 에너지 소비가 비정상적으로 증가하는 에너지 불균형 문제도 가지고 있다. 이를 해결하고자, 최근에는 태양 에너지 수집형 노드를 사용하여 에너지를 지속적으로 수집함으로써 배터리 자원 제약 문제를 해결하고, 또한 모바일 싱크를 활용하여 고정된 싱크 노드 근처의 에너지 불균형 문제를 해결하려는 연구들이 활발히 진행되고 있다. 기존의 고정된 싱크 및 배터리 기반의 WSN을 위하여 제안된 유명한 데이터 수집 기법인 CTP(Collection Tree Protocol)도 이와 같은 에너지 제약 및 에너지 사용 불균형 문제는 고려하지 않고 설계되었는데, 따라서 정전 노드 발생 및 트리 구조의 루프화와 같은 네트워크의 안정성(Reliablilty)이 심각하게 저하되는 문제를 내포하고 있었다. 이를 해결하고자, 본 논문에서는 모바일 싱크와 태양에너지 수집형 노드로 구성된 WSN을 위한 향상된 CTP 기법(Solar-CTP)을 제안한다. 제안된 Solar-CTP기법에서는 수집 에너지 및 사용 에너지양 예측을 통해 노드 동작 모드를 결정한다. 아울러 싱크의 주기적인 이동으로 싱크 주변 노드의 에너지 불균형 문제를 해결한다. 성능검증을 통해 기존 CTP에 비해 Solar-CTP의 정전 노드의 수가 줄어들고, 싱크의 데이터 수집량이 향상된 것을 확인하였다.