전문 웹 사이트에서의 통계적 기법과 태그 정보를 이용한 문서 분류

Web Document Clustering Using Statistical Techniques & Tag Information on the Specific-Domain Web site

  • 조은휘 (홍익대학교 컴퓨터공학과) ;
  • 변영태 (홍익대학교 컴퓨터공학과)
  • 발행 : 2002.11.01

초록

특정 영역에 대해 사용자에게 관련 정보를 제공하는 서비스를 위해 정보 에이전트를 개발하고 있다. 이 시스템은 웹 상에서 문서를 수집해 오는데 특정 영역과 관련한 지식베이스를 토대로 하고 있는데, 이들 중 몇몇 전문 사이트 내의 정보가 많이 포함되어 있음을 볼 수 있다. 그러므로 전문 사이트 내의 관련 문서 수집은 중요한 의의가 있다. 본 논문에서는 이들 전문 사이트 내의 전문 문서 수집을 위해 문서간의 유사성을 토대로 클러스터링 한다. 즉, 문서내의 텀(term)과 HTML 태그(tag), 지식베이스의 WordNet 계층구조를 data로 하고 SVD(Singular Value Decomposition)을 사용하여 문서간의 관계를 밝혀내었다.

키워드