软件导刊
軟件導刊
연건도간
Software Guide
2015年
11期
68-70
,共3页
搜索引擎%主题爬虫%信息采集
搜索引擎%主題爬蟲%信息採集
수색인경%주제파충%신식채집
基于主题搜索的主题网络爬虫,只抓取与用户主题相关的页面.在深入分析主题页面分布特征和主题相关性判别算法的基础上,提出了一个面向主题搜索的网络爬虫模型,它很好地克服了通用搜索引擎准确率偏低、信息内容相对陈旧、信息分布范围不均衡等不足.实验结果表明,尽管基于主题爬虫的搜索增加了内存使用率,但也成倍提升了搜索的准确性,提高了抓取效率以及抓取结果的利用率.
基于主題搜索的主題網絡爬蟲,隻抓取與用戶主題相關的頁麵.在深入分析主題頁麵分佈特徵和主題相關性判彆算法的基礎上,提齣瞭一箇麵嚮主題搜索的網絡爬蟲模型,它很好地剋服瞭通用搜索引擎準確率偏低、信息內容相對陳舊、信息分佈範圍不均衡等不足.實驗結果錶明,儘管基于主題爬蟲的搜索增加瞭內存使用率,但也成倍提升瞭搜索的準確性,提高瞭抓取效率以及抓取結果的利用率.
기우주제수색적주제망락파충,지조취여용호주제상관적혈면.재심입분석주제혈면분포특정화주제상관성판별산법적기출상,제출료일개면향주제수색적망락파충모형,타흔호지극복료통용수색인경준학솔편저、신식내용상대진구、신식분포범위불균형등불족.실험결과표명,진관기우주제파충적수색증가료내존사용솔,단야성배제승료수색적준학성,제고료조취효솔이급조취결과적이용솔.
