※ 기관로그인 시 무료 이용이 가능합니다.
※ 학술발표대회집, 워크숍 자료집 중 4페이지 이내 논문은 '요약'만 제공되는 경우가 있으니, 구매 전에 간행물명, 페이지 수 확인 부탁 드립니다.
4,000원
원문정보
초록
영어
A fast statistical method for Chinese unknown word detection is proposed. It is based on association measure, heuristic features and LocalMaxs algorithm. The unknown words discovered are not limited to certain word patterns. It is also effective for low frequency unknown words and sensitive to new coming texts. Experiment shows its effectiveness.
목차
Abstract 1. Introduction 2. Unknown Word Detection 2.1 Problem statement 2.2 Association measure 2.3 LocalMaxs algorithm 2.4 Heuristic features 3. Implementation Suffix Array Based DataStructure 4. Experiment and Result 5. Conclusion and Future Work References
키워드
word detectionunknown wordstatistical methodChinese
저자
Tao Liu, Zhi‐ming Xu [ Harbin Institute of Technology ]
Corresponding
한국어정보학회 [Korean Language Information Science Society]
설립연도
1990
분야
인문학>언어학
소개
학술적인 연구를 통하여 국어정보처리에 관련된 이론 체계를 정립하고, 산업계와의 긴밀한 협동을 통하여 정보처리 기술을 향상 시키면서 정보산업의 성장을 돕고, 대중적인 교육과 홍보를 통하여 발전된 정보 처리의 기술을 보급하므로써 국어의 문화적 가치를 높히고 국어정보 처리 기술의 국제적 지위향상과 표준화에 기여하고자 합니다.