A Homonym Disambiguation System Based on Statistical Model Using Sense Category and Distance Weights

의미범주 및 거리 가중치를 고려한 통계기반 동형이의어 분별 시스템

  • 김준수 (울산대학교 전자계산학과) ;
  • 김창환 (울산대학교 전자계산학과) ;
  • 이왕우 (울산대학교 전자계산학과) ;
  • 이수동 (울산대학교 전자계산학과) ;
  • 옥철영 (울산대학교 전자계산학과)
  • Published : 2001.10.12

Abstract

본 논문에서는 Bayes 정리를 적용한 통계기반 동형이의어 분별 시스템에 대한 외부실험 결과를 분석하여, 정확률 향상을 위한 의미범주 가중치 및 인접 어절에 대한 거리 가중치 모델을 제시한다. 의미 분별된 사전 뜻풀이말 코퍼스(120만 어절)에서 구축된 의미정보를 이용한 통계기반 동형이의어 분별 시스템을 사전 뜻풀이말 문장에 출현하는 동형이의어 의미 분별에 적용한 결과 상위 고빈도 200개의 동형이의어에 대해 평균 98.32% 정확률을 보였다. 내부 실험에 사용된 200개의 동형이의어 중 49개(체언 31개, 용언 18개)를 선별하여 이들 동형이의어를 포함하고 있는 50,703개의 문장을 세종계획 품사 부착 코퍼스(350만 어절)에서 추출하여 외부 실험을 하였다. 분별하고자 하는 동형이의어의 앞/뒤 5어절에 대해 의미범주 및 거리 가중치를 부여한 실험 결과 기존 통계기반 분별 모델 보다 2.93% 정확률이 향상되었다.

Keywords