科技导报
科技導報
과기도보
SCIENCE & TECHNOLOGY REVIEW
2011年
21期
31-35
,共5页
主题式爬虫%企业搜索引擎%Deep Web搜索技术%电信%设计与实施
主題式爬蟲%企業搜索引擎%Deep Web搜索技術%電信%設計與實施
주제식파충%기업수색인경%Deep Web수색기술%전신%설계여실시
随着Web技术的飞速发展,海量数据的管理与搜索变得尤为重要.海量信息的异构性和动态性特点要求信息集成需要Web爬虫来自动获取这些页面,以便进一步处理数据.而一些企业内部的资料既要保密又要供不同的内部职员使用,这种既开放又保守的特点成为企业发展的瓶颈.为了帮助用户完成这样的任务,本文改变传统的资源共享形式,为企业提供了一个高效便利保密的资源共享管理平台--企业搜索引擎(ESE),提出了一种基于主题式爬虫的Deep Web页面的企业搜索引擎(ESE)的和基于开源Java Lucene的索引企业搜索系统设计与实现方法.通过在电信行业Deep Web站点部署实验,经运行检验,结果达到了设计指标要求,为电信行业搜索发挥了作用.并对搜索的精度、速度,以及垃圾网页反舞弊等方面研究进行了展望.
隨著Web技術的飛速髮展,海量數據的管理與搜索變得尤為重要.海量信息的異構性和動態性特點要求信息集成需要Web爬蟲來自動穫取這些頁麵,以便進一步處理數據.而一些企業內部的資料既要保密又要供不同的內部職員使用,這種既開放又保守的特點成為企業髮展的瓶頸.為瞭幫助用戶完成這樣的任務,本文改變傳統的資源共享形式,為企業提供瞭一箇高效便利保密的資源共享管理平檯--企業搜索引擎(ESE),提齣瞭一種基于主題式爬蟲的Deep Web頁麵的企業搜索引擎(ESE)的和基于開源Java Lucene的索引企業搜索繫統設計與實現方法.通過在電信行業Deep Web站點部署實驗,經運行檢驗,結果達到瞭設計指標要求,為電信行業搜索髮揮瞭作用.併對搜索的精度、速度,以及垃圾網頁反舞弊等方麵研究進行瞭展望.
수착Web기술적비속발전,해량수거적관리여수색변득우위중요.해량신식적이구성화동태성특점요구신식집성수요Web파충래자동획취저사혈면,이편진일보처리수거.이일사기업내부적자료기요보밀우요공불동적내부직원사용,저충기개방우보수적특점성위기업발전적병경.위료방조용호완성저양적임무,본문개변전통적자원공향형식,위기업제공료일개고효편리보밀적자원공향관리평태--기업수색인경(ESE),제출료일충기우주제식파충적Deep Web혈면적기업수색인경(ESE)적화기우개원Java Lucene적색인기업수색계통설계여실현방법.통과재전신행업Deep Web참점부서실험,경운행검험,결과체도료설계지표요구,위전신행업수색발휘료작용.병대수색적정도、속도,이급랄급망혈반무폐등방면연구진행료전망.
