Journal of the Korean Society for Library and Information Science (한국문헌정보학회지)

Korean Society For Library And Information Science (한국문헌정보학회)
권호 표지
DOI QR코드

DOI QR Code

Evaluation of the documents from the Web-based Question and Answer Service

지식 검색 서비스 개선을 위한 문서의 적합도 및 신뢰도 분석

  • Published : 2006.06.01
Download PDF
⟨ Previous Next ⟩

Abstract

This study suggests evaluation criteria for the web-based question-answer databases provided by major Korean search portals. In particular, this study suggests evaluation criteria for the relevance of question titles, entire questions, and answer's. The evaluation criteria for the qualify of answers are also developed. Based on these criteria. evaluation of documents from Naver Knowledge-in are performed. The results of this study can be implemented to the development of test collection of question-answer databases. The implications for system designers and web content providers are discussed.

지식 검색 서비스가 국내 포탈들의 대표적인 서비스로 정착되었음에도 불구하고, 지금까지 지식 검색 서비스의 질적 향상을 위한 연구나 지식 검색 데이터베이스의 문서 평가에 대한 연구는 미흡한 실정이다. 이에 본 연구에서는 지식 검색 데이터베이스를 구성하는 지식 문서의 평가 기준을 제시하였다. 구체적으로 본 연구에서는 지식 문서를 구성하는 질문 제목, 질문 전체, 답변의 적합도 평가 기준을 제안하고, 답변의 신뢰도 평가 기준도 제시하였다. 이러한 평가 기준에 근거하여 본 연구에서는 지식 문서의 실제 평가를 수행하였다. 본 연구의 결과는 지식 검색 테스트 컬렉션 구축과 신뢰도 컬렉션 구축에 활용되어 궁극적으로 지식 검색 서비스 개선에 기여할 것으로 기대된다.

Keywords

References

  1. 노정순. 2004. Invisible Web 탐색도구의 성능 비교 및 분석. '정보관리학회지', 21(3): 203-225
  2. 맹성현, 이석훈, 이준호, 이응봉, 송사광. 1999. 정보 검색 시스템 평가를 위한 균형 테스트 컬렉션 구축. '정보관리학회지', 16(2): 135-148
  3. 박소연, 이준호. 2005. 국내 웹 이용자의 검색 행태 추이 분석. '한국문헌정보학회지', 39(2): 147-160
  4. 박주범, 정동열. 2004. 지식검색서비스 이용에 관한 실증적 연구. '정보관리학회지', 21(3): 83-98
  5. 이두영, 강순희. 2003. 웹 검색엔진의 지식검색커뮤니티 기반 지식관리에 관한 연구. '제10회 한국정보관리학회 학술대회 논문집': 143-152
  6. 최상희. 2005. 문서구조를 이용한 질의응답문서 클러스터링에 관한 연구. '한국문헌정보학회지', 39(4): 105-118
  7. Bivens-Tatum, R. W. 2001. 'Expert searvices on the Web: the commercial competition for libraries.' College & Research Libraries News, 62(7): 714-716
  8. Goffman, W. 1964. 'On relevance as a measure.' Information Storage and Retrieval, 2(3): 201-203 https://doi.org/10.1016/0020-0271(64)90004-X
  9. Hillman, D. J. 1964. 'The Notion of Relevance(1).' American Documentation, 15(1): 26-34 https://doi.org/10.1002/asi.5090150107
  10. Janes, J., Hill, C., and Rolfe, A. 2001. 'Ask- an-expert services analysis.' Journal of the American Soceity for Information Science and Technology, 52(13): 1106- 1121 https://doi.org/10.1002/asi.1177
  11. Kleinberg, J. M. 1999. 'Authoritative sources in hyperlinked environment.' Journal of the ACM, 46(5): 604-632 https://doi.org/10.1145/324133.324140
  12. Moon, I., and Woyke, E. 2006. 'NHN: The little search engine that could.' Businessweek, 30 January
  13. National Academy of Sciences. 1959. Proceedings of the Internatioal Conference on Science Information, 2 Vols. National Academy of Sciences, Washington, D. C.
  14. Pack. T. 2000. 'Human search engines: the next killer app.' EContent, 23(6): 16- 22
  15. Saracevic, T. 1975. 'Relevance: A review of and a framework for the thinking on the notion in information science.' Journal of the American Society for Information Science, 26(6): 321-343 https://doi.org/10.1002/asi.4630260604
  16. Strong, D. M., Lee, Y. W., & Wang, R. Y. 1997. 'Data quality in context.' Communications of the ACM, 40(5): 103- 110 https://doi.org/10.1145/253769.253804
  17. Zhou, Y., and Croft, W. B. 2005. 'Document quality models for web ad hoc retrieval.' in Proceedings of the ACM Fourteenth Conference on Information and Knowledge Management, 331-332
  18. Zhu, X., & Gauch, S. 2000. 'Incorporating quality metrics in centralized/ distributed information retrieval on the world wide web.' In Proceedings of the 23rd Annual International ACM SIGIR Conference on Research and Development in Information Retrieval, 288-295

Cited by

  1. Analysis and Evaluation of Video Search Services of Korean Search Portals: Naver versus Google Korea vol.31, pp.3, 2014, https://doi.org/10.3743/KOSIM.2014.31.3.181
  2. Research Trends of the Credibility of Information in Social Q&A vol.29, pp.2, 2012, https://doi.org/10.3743/KOSIM.2012.29.2.135
  3. Question and Answering System through Search Result Summarization of Q&A Documents vol.3, pp.4, 2014, https://doi.org/10.3745/KTSDE.2014.3.4.149