Annual Conference on Human and Language Technology (한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리))
- 2001.10d
- /
- Pages.302-309
- /
- 2001
- /
- 2005-3053(pISSN)
Korean-English Sentence Alignment Based on Sentence Length and Word Alignment
문장 길이와 단어 정렬에 기반한 한-영 문장 정렬
- Lim, Jae-Soo (Dept. of Computer Science and Engineering, Korea University) ;
- Seo, Hee-Cheol (Dept. of Computer Science and Engineering, Korea University) ;
- Lee, Sang-Zoo (Dept. of Computer Science and Engineering, Korea University) ;
- Rim, Hae-Chang (Dept. of Computer Science and Engineering, Korea University)
- Published : 2001.10.12
Abstract
말뭉치를 통한 통계적인 자연 언어 처리에 관한 연구가 다국어 처리 분야에서도 활발히 진행되고 있는 가운데, 본 논문에서는 병렬 말뭉치 구축 및 활용의 기본이 되는 문장 정렬을 위한 효과적인 방법을 제안한다. 먼저, 기존의 문장 길이를 이용한 방법을 한-영 문장 정렬에 적용해 보고, 길이 정보만을 이용했을 때의 한계점을 지적한다. 그리고, 사전과 품사 대응 확률을 이용한 단어 정렬을 통하여, 길이 기반의 정렬 방식이 갖는 문제점을 보완할 수 있는 방법을 제시한다. 실험을 통하여 제안한 방법이 길이에 기반한 방법에 비하여 높은 성능을 나타냄을 알 수 있었다. 또한 한-영 문장 정렬에의 어휘 정보 활용에 있어서 문제가 될 수 있는 요소가 어떤 것들이 있는지 알아본다.
Keywords