网络安全技术与应用
網絡安全技術與應用
망락안전기술여응용
NETWORK SECURITY TECHNOLOGIES & APPLICATION
2015年
4期
29-30
,共2页
数据分析系统%互联网%舆情监测%大数据
數據分析繫統%互聯網%輿情鑑測%大數據
수거분석계통%호련망%여정감측%대수거
网络舆情信息能快速地反映了社会舆情状况和发展态势,依靠人工的方式检查方式效率低下、片面易漏.本文通过多通道公共信息源的智能化主动采集方法,利用多机多线程、异步socket通讯机制以及基于BloomFilter的大规模链接查重等技术来实现原始网页的高效并行化采集,在有限的带宽和系统资源的限制下,实现舆情检查速度最大化.
網絡輿情信息能快速地反映瞭社會輿情狀況和髮展態勢,依靠人工的方式檢查方式效率低下、片麵易漏.本文通過多通道公共信息源的智能化主動採集方法,利用多機多線程、異步socket通訊機製以及基于BloomFilter的大規模鏈接查重等技術來實現原始網頁的高效併行化採集,在有限的帶寬和繫統資源的限製下,實現輿情檢查速度最大化.
망락여정신식능쾌속지반영료사회여정상황화발전태세,의고인공적방식검사방식효솔저하、편면역루.본문통과다통도공공신식원적지능화주동채집방법,이용다궤다선정、이보socket통신궤제이급기우BloomFilter적대규모련접사중등기술래실현원시망혈적고효병행화채집,재유한적대관화계통자원적한제하,실현여정검사속도최대화.
