计算机工程
計算機工程
계산궤공정
COMPUTER ENGINEERING
2010年
10期
231-232,235
,共3页
刘洁彬%宋茂强%赵方%杨志宇
劉潔彬%宋茂彊%趙方%楊誌宇
류길빈%송무강%조방%양지우
词性标注%二阶隐马尔可夫模型%参数平滑%Viterbi算法
詞性標註%二階隱馬爾可伕模型%參數平滑%Viterbi算法
사성표주%이계은마이가부모형%삼수평활%Viterbi산법
为体现上下文信息对当前词汇词性的影响,在传统隐马尔可夫模型的基础上提出一种基于上下文的二阶隐马尔可夫模型,并应用于中文词性标注中.针对改进后的统计模型中由于训练数据过少而出现的数据稀疏问题,给出基于指数线性插值改进平滑算法,对参数进行有效平滑.实验表明,基于上下文的二阶隐马尔可夫模型比传统的隐马尔可夫模型具有更高的词性标注正确率和消歧率.
為體現上下文信息對噹前詞彙詞性的影響,在傳統隱馬爾可伕模型的基礎上提齣一種基于上下文的二階隱馬爾可伕模型,併應用于中文詞性標註中.針對改進後的統計模型中由于訓練數據過少而齣現的數據稀疏問題,給齣基于指數線性插值改進平滑算法,對參數進行有效平滑.實驗錶明,基于上下文的二階隱馬爾可伕模型比傳統的隱馬爾可伕模型具有更高的詞性標註正確率和消歧率.
위체현상하문신식대당전사회사성적영향,재전통은마이가부모형적기출상제출일충기우상하문적이계은마이가부모형,병응용우중문사성표주중.침대개진후적통계모형중유우훈련수거과소이출현적수거희소문제,급출기우지수선성삽치개진평활산법,대삼수진행유효평활.실험표명,기우상하문적이계은마이가부모형비전통적은마이가부모형구유경고적사성표주정학솔화소기솔.
