计算机工程与应用
計算機工程與應用
계산궤공정여응용
COMPUTER ENGINEERING AND APPLICATIONS
2014年
22期
32-37
,共6页
王文帅%杜然%程耀东%陈刚
王文帥%杜然%程耀東%陳剛
왕문수%두연%정요동%진강
微博%Bloom Filter%社会网络主题模型分析(SNLDA)%话题挖掘
微博%Bloom Filter%社會網絡主題模型分析(SNLDA)%話題挖掘
미박%Bloom Filter%사회망락주제모형분석(SNLDA)%화제알굴
microblog%Bloom Filter%Social Network LDA(SNLDA)%topic mining
随着微博的日趋流行,新浪微博已成为公众获取和传播信息的重要平台之一,针对微博数据的话题挖掘也成为当前的研究热点。提出一个面向大规模微博数据的话题挖掘方法。首先对大规模微博数据进行分析,基于Bloom Filter算法对数据进行去重处理,针对微博的特有结构,对文本进行预处理,提出改进的LDA主题模型So-cial Network LDA(SNLDA),采用吉布斯采样法进行模型推导,挖掘出微博话题。实验结果表明,方法能有效地从大规模微博数据中挖掘出话题信息。
隨著微博的日趨流行,新浪微博已成為公衆穫取和傳播信息的重要平檯之一,針對微博數據的話題挖掘也成為噹前的研究熱點。提齣一箇麵嚮大規模微博數據的話題挖掘方法。首先對大規模微博數據進行分析,基于Bloom Filter算法對數據進行去重處理,針對微博的特有結構,對文本進行預處理,提齣改進的LDA主題模型So-cial Network LDA(SNLDA),採用吉佈斯採樣法進行模型推導,挖掘齣微博話題。實驗結果錶明,方法能有效地從大規模微博數據中挖掘齣話題信息。
수착미박적일추류행,신랑미박이성위공음획취화전파신식적중요평태지일,침대미박수거적화제알굴야성위당전적연구열점。제출일개면향대규모미박수거적화제알굴방법。수선대대규모미박수거진행분석,기우Bloom Filter산법대수거진행거중처리,침대미박적특유결구,대문본진행예처리,제출개진적LDA주제모형So-cial Network LDA(SNLDA),채용길포사채양법진행모형추도,알굴출미박화제。실험결과표명,방법능유효지종대규모미박수거중알굴출화제신식。
With the daily popularity of microblog, Sina Weibo has become one of the important public access to and dis-semination of information platform, microblog topic mining has become a current research focuses. This paper proposes a topic mining method on massive Social Network data. This paper analyzes the large-scale microblog data, uses Bloom Filter algorithm to eliminate the duplicate data. In view of the special structure of microblog, filter the text. SNLDA, an improved LDA topic model is proposed in this paper, Gibbs sampling is chosen to deduce the model, which can mine the microblog topics. The experimental results show that the method can effectively excavate the topics from the large-scale microblog data.