中国科学院研究生院学报
中國科學院研究生院學報
중국과학원연구생원학보
JOURNAL OF THE GRADUATE SCHOOL OF THE CHINESE ACADEMY OF SCIENCES
2009年
5期
703-711
,共9页
吴晶晶%荆继武%聂晓峰%王平建
吳晶晶%荊繼武%聶曉峰%王平建
오정정%형계무%섭효봉%왕평건
文本实时处理%中文分词%词典法分词%双字词-长词哈希机制
文本實時處理%中文分詞%詞典法分詞%雙字詞-長詞哈希機製
문본실시처리%중문분사%사전법분사%쌍자사-장사합희궤제
通过研究目前中文分词领域各类分词机制,注意到中文快速分词机制的关键在于对单双字词的识别,在这一思想下,提出了一种快速中文分词机制:双字词-长词哈希机制,通过提高单双字词的查询效率来实现对中文分词机制的改进.实验证明,该机制提高了中文文本分词的效率.
通過研究目前中文分詞領域各類分詞機製,註意到中文快速分詞機製的關鍵在于對單雙字詞的識彆,在這一思想下,提齣瞭一種快速中文分詞機製:雙字詞-長詞哈希機製,通過提高單雙字詞的查詢效率來實現對中文分詞機製的改進.實驗證明,該機製提高瞭中文文本分詞的效率.
통과연구목전중문분사영역각류분사궤제,주의도중문쾌속분사궤제적관건재우대단쌍자사적식별,재저일사상하,제출료일충쾌속중문분사궤제:쌍자사-장사합희궤제,통과제고단쌍자사적사순효솔래실현대중문분사궤제적개진.실험증명,해궤제제고료중문문본분사적효솔.
