计算机工程与设计
計算機工程與設計
계산궤공정여설계
COMPUTER ENGINEERING AND DESIGN
2007年
2期
486-488
,共3页
王继曾%罗恒%刘宽%任浩征
王繼曾%囉恆%劉寬%任浩徵
왕계증%라항%류관%임호정
汉语词法分析%条件随机场%最大熵%序列数据标记%属性函数
漢語詞法分析%條件隨機場%最大熵%序列數據標記%屬性函數
한어사법분석%조건수궤장%최대적%서렬수거표기%속성함수
中文分词是一个困难的、重要的被广泛研究的序列数据建模问题.以往应用条件随机场进行汉语分词时,将分词转化为对汉字的标注,造成了大量的冗余的候选切分,以至于在分词过程中大大降低了分词的速度.提出了使用词图作为基础的标记序列来完成汉语的词法分析,这样充分利用了现有的词典资源,在属性框架的选择时也可以方便地融合语言知识,并且长度歧视及状态歧视方面的影响也被减到最小.提出了应用条件随机场来构建统一的汉语词法分析.
中文分詞是一箇睏難的、重要的被廣汎研究的序列數據建模問題.以往應用條件隨機場進行漢語分詞時,將分詞轉化為對漢字的標註,造成瞭大量的冗餘的候選切分,以至于在分詞過程中大大降低瞭分詞的速度.提齣瞭使用詞圖作為基礎的標記序列來完成漢語的詞法分析,這樣充分利用瞭現有的詞典資源,在屬性框架的選擇時也可以方便地融閤語言知識,併且長度歧視及狀態歧視方麵的影響也被減到最小.提齣瞭應用條件隨機場來構建統一的漢語詞法分析.
중문분사시일개곤난적、중요적피엄범연구적서렬수거건모문제.이왕응용조건수궤장진행한어분사시,장분사전화위대한자적표주,조성료대량적용여적후선절분,이지우재분사과정중대대강저료분사적속도.제출료사용사도작위기출적표기서렬래완성한어적사법분석,저양충분이용료현유적사전자원,재속성광가적선택시야가이방편지융합어언지식,병차장도기시급상태기시방면적영향야피감도최소.제출료응용조건수궤장래구건통일적한어사법분석.
