基于LDA模型的微博话题发现技术研究.PDF
文本预览下载声明
第31卷第10期 计算机应用与软件 Vol31No.10
2014年10月 ComputerApplicationsandSoftware Oct.2014
基于LDA模型的微博话题发现技术研究
1 2
李凤岭 朱保平
1(江苏食品职业技术学院信息工程系 江苏淮安223000)
2(南京理工大学计算机科学与技术学院 江苏南京215000)
摘 要 微博中存在着数以亿计的用户,这些用户每天发布大量的信息。这些海量的微博信息给热点话题发现提出了严峻的挑
战。应用LDA(LatentDirichletAllocation)模型对微博中隐含的话题进行建模,利用话题间的共享词汇将话题构成一个无向加权图,
并通过PageRank算法将话题进行排名。实验结果表明,排名后返回给用户的话题的准确性明显高于未排名的结果。
关键词 微博 话题 图 排名 LDA模型
中图分类号 TP393 文献标识码 A DOI:10.3969/j.issn.1000386x.2014.10.006
ONLDABASEDMICROBLOGGINGTOPICDETECTION
1 2
LiFengling ZhuBaoping
1(DepartmentofInformationEngineering,JiangsuFoodScienceCollege,Huaian223000,Jiangsu,China)
2(CollegeofComputerSicenceandTechnology,NanjingUniversityofScienceandTechnology,Nanjing215000,Jiangsu,China)
Abstract Therearetensofmillionsofusersinmicroblogging,andtheypublishmassivemessageseveryday.Thesemassive
microbloggingmessagesimposeseverechallengetohottopicsdetection.Inthispaperwemodeltheconcealedtopicsinmicrobloggingwith
LDA(latentDirichletAllocation)model,formthetopicsasanundirectedweightedgraphbyutilisingthesharingwordsamongthetopics,
andrankthetopicsinthegraphwithPageRankalgorithm.ExperimentalresultsshowthatthetopicsreturnedtousersafterthePageRank
rankingismoreaccuratethanthatofnonranking.
Keywords Microblogging Topic Graph Ranking LatentDirichletallocationmodel
0 引 言 1 相关工作
微博作为一种新兴媒体,已经成为了信息传播的重要方式。 在信息检索领域,话题发现一直是一项重要的研究工作。
人们不仅可以利用微博共享信息,还可以在微博上搜索信息,实 话题发现模型可以分为基于文档模型的话题发现和基于 LDA
时收看各种新闻资讯。微博兼有博客和即时消息两种网络服务 模型的话题发现。
的优点,它允许人们把他们目前正在做的事情在网络上以短消 传统的文本话题发现方法是将文本文档看作向量,
显示全部