中文信息学报
中文信息學報
중문신식학보
JOURNAL OF CHINESE INFORMAITON PROCESSING
2014年
5期
46-50
,共5页
词的领域性%话题检测%TF* IDF
詞的領域性%話題檢測%TF* IDF
사적영역성%화제검측%TF* IDF
the domain property of the word%topic detection%TF * IDF
词作为最小的语义单位,同领域之间具有复杂的关系,特别是较为常用的词,通常难以明确界定其所属领域.在某些应用中并非必须确定词和领域的明确关系,仅仅依赖词的领域性的量化值就能够取得较好的效果.该文根据大规模语料库中词的关联信息,采用无指导的方法,对词的领域性进行量化,其结果可以作为词的一种特征应用于文本分类、话题检测、信息检索等相关的自然语言处理中.最后,通过和常用的特征——TF* IDF在话题检测应用中进行对比,证明了其有效性.
詞作為最小的語義單位,同領域之間具有複雜的關繫,特彆是較為常用的詞,通常難以明確界定其所屬領域.在某些應用中併非必鬚確定詞和領域的明確關繫,僅僅依賴詞的領域性的量化值就能夠取得較好的效果.該文根據大規模語料庫中詞的關聯信息,採用無指導的方法,對詞的領域性進行量化,其結果可以作為詞的一種特徵應用于文本分類、話題檢測、信息檢索等相關的自然語言處理中.最後,通過和常用的特徵——TF* IDF在話題檢測應用中進行對比,證明瞭其有效性.
사작위최소적어의단위,동영역지간구유복잡적관계,특별시교위상용적사,통상난이명학계정기소속영역.재모사응용중병비필수학정사화영역적명학관계,부부의뢰사적영역성적양화치취능구취득교호적효과.해문근거대규모어료고중사적관련신식,채용무지도적방법,대사적영역성진행양화,기결과가이작위사적일충특정응용우문본분류、화제검측、신식검색등상관적자연어언처리중.최후,통과화상용적특정——TF* IDF재화제검측응용중진행대비,증명료기유효성.