CAJ | 학술논문

传统的分词方法将一个维吾尔文语义词(多词关联模式)拆分成与词意义不符的若干个片段,因此在维吾尔语文本分析及文本处理过程中导致许多问题,严重影响文本处理效率.提出了一种维吾尔文组词的全新概念,用互信息作为相邻单词间关联程度的度量,实现了基于分段式策略和增量式策略的两种自适应组词算法,并与传统的分词方法得到的词汇表进行对比分析.实验结果表明,组词算法能够非常有效地提取文本中的语义词,两种算法在大规模文本集上的组词准确率分别达到了84.31％和88.24％.
전통적분사방법장일개유오이문어의사(다사관련모식)탁분성여사의의불부적약간개편단,인차재유오이어문본분석급문본처리과정중도치허다문제,엄중영향문본처리효솔.제출료일충유오이문조사적전신개념,용호신식작위상린단사간관련정도적도량,실현료기우분단식책략화증량식책략적량충자괄응조사산법,병여전통적분사방법득도적사회표진행대비분석.실험결과표명,조사산법능구비상유효지제취문본중적어의사,량충산법재대규모문본집상적조사준학솔분별체도료84.31％화88.24％.