Annual Conference on Human and Language Technology (한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리))
- 2009.10a
- /
- Pages.186-190
- /
- 2009
- /
- 2005-3053(pISSN)
Performance Improvement of POS tagging for English Unknown words Using Affixes
접사 정보를 이용한 영어 미등록어의 품사부착 성능개선
- Kim, Hyung-Chul (Korea Maritime University) ;
- Kim, Jae-Hoon (Korea Maritime University) ;
- Choi, Yun-Soo (Korea Institute of Science and Technology Information)
- Published : 2009.10.09
Abstract
품사 부착은 각종 자연어처리의 기본적인 요소이며, 크게 규칙 기반 방법과, 통계 기반 방법으로 나눌 수 있다. 대부분은 통계 기반의 기계학습을 이용하고 있으며, 대개 95% 이상의 성능을 보여주고 있다. 그러나 미등록어에 대해서는 성능이 그다지 높지 않다. 이 논문에서는 단어의 접사 정보를 이용해서 미등록어에 대한 품사 부착의 성능을 높이는 방법을 제안한다. 제안된 시스템은 CRF(Conditional Random Fields)를 이용하며, 그 자질의 일부로 접사 정보를 이용한다. 그 결과 미등록어에 대해서 약 40%의 성능이 개선되었다. 앞으로 미등록어에 적합한 자질을 연구하고 개발할 필요가 있을 것으로 생각된다.