河北工业大学学报
河北工業大學學報
하북공업대학학보
JOURNAL OF HEBEI UNIVERSITY OF TECHNOLOGY
2004年
1期
22-26
,共5页
王中%郭兰申%何丕廉%郑小慎
王中%郭蘭申%何丕廉%鄭小慎
왕중%곽란신%하비렴%정소신
词共现%衰减因子模型%并行计算%MPI
詞共現%衰減因子模型%併行計算%MPI
사공현%쇠감인자모형%병행계산%MPI
提出并实现了一种带衰减因子的词共现模型,可以自动生成包含词与词相关性信息的资源.由于该模型考虑了词与词之间距离的概念,同普通的词共现模型相比,该模型更能准确地描述词与词之间的相关性信息.但因该模型在大规模语料处理中的计算量非常巨大而难以在传统的串行环境下实现.克服这一困难的有效方法是建立并行计算环境下的词共现模型计算模式,通过MPI并行群集环境下成功地实现了该模型的计算,取得了理想的加速比和并行效率,为中文信息处理基础资源的建设迈出了实质性的一步.
提齣併實現瞭一種帶衰減因子的詞共現模型,可以自動生成包含詞與詞相關性信息的資源.由于該模型攷慮瞭詞與詞之間距離的概唸,同普通的詞共現模型相比,該模型更能準確地描述詞與詞之間的相關性信息.但因該模型在大規模語料處理中的計算量非常巨大而難以在傳統的串行環境下實現.剋服這一睏難的有效方法是建立併行計算環境下的詞共現模型計算模式,通過MPI併行群集環境下成功地實現瞭該模型的計算,取得瞭理想的加速比和併行效率,為中文信息處理基礎資源的建設邁齣瞭實質性的一步.
제출병실현료일충대쇠감인자적사공현모형,가이자동생성포함사여사상관성신식적자원.유우해모형고필료사여사지간거리적개념,동보통적사공현모형상비,해모형경능준학지묘술사여사지간적상관성신식.단인해모형재대규모어료처리중적계산량비상거대이난이재전통적천행배경하실현.극복저일곤난적유효방법시건립병행계산배경하적사공현모형계산모식,통과MPI병행군집배경하성공지실현료해모형적계산,취득료이상적가속비화병행효솔,위중문신식처리기출자원적건설매출료실질성적일보.
