基于云计算的微博舆情监控系统研究

来源 :西南科技大学 | 被引量 : 0次 | 上传用户:zzhzzgxl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,社会中的很多热点话题往往都是从微博开始传播,如何从微博中发现热点话题并对热点话题做舆情分析,是非常有现实意义的工作。本文针对微博舆情的特点,研究了微博舆情监控系统的实现方法。介绍Hadoop平台处理大数据的优势和原理,实现了数据采集、文本模型表示、话题发现以及舆情分析的功能。本文的主要工作和研究内容如下:第一,本文在数据采集模块采用新浪微博API和网络爬虫技术相结合实现微博数据采集。基于微博热搜词检索实现相关微博的定位,能够在短时间内获取大量领域相关的微博数据。第二,在热点话题发现方法的改进上,采用了基于新词发现的微博文本主题发现方法,将其分为三个步骤:中文分词、LDA主题建模、主题聚类。在中文分词环节,加入了新词发现模块,提高了分词准确率。在建立文本模型时,采用LDA主题模型,提高了话题发现的准确率。第三,为了提高LDA建模的准确度,在构建文本模型前加入文本分类模块,解决了原有的话题发现方法在应用于微博文本时精度不高以及将同一关键字下的不同话题混淆的问题。本文基于实际的新浪微博数据实现热点话题发现、话题传播路径、内容倾向性分析、社会网络分析功能进行测试、分析。最后本文针对系统的缺陷,对未来的工作做展望。
其他文献
本研究以河北省唐山市路北区、路南区、丰润区、丰南区17所幼儿园为样本,对幼儿园教育环境现状进行了质量评定。结果发现幼儿园教育环境质量整体水平不高;城、乡幼儿园教育环
国内外大量研究表明,亲近自然对幼儿的成长和发展有着重要的促进作用。亲近自然本是幼儿的天性,但在当今时代,幼儿大部分时间被局限在室内,电子产品充斥着现代生活,各种各样
近年来,随着我国智能电网的大力建设,经过高山、峡谷、湖泊和河流等条件恶劣区域的架空输电线路越来越多,电力的安全传送面临越来越严峻挑战。架空输电线路基于先进测量、信
埃德加·爱伦·坡是美国文学史上特立独行的作家之一,其哥特式小说中呈现出生与死、恶与梦的病态风格。坡哥特式小说的价值不仅凸显在恐怖的场景氛围铺垫、奇幻性的情节叙事
本文从隐喻和转喻的视角分析了"开"和"关"的词义演变特点,对比了二者的构词能力,并分析了"开"和"关"的不同演变路径。虽然它们的演变路径不同,但是演变机制却是一样的,即都主
新媒体技术的变革改变了明星形象建构的方法,微博成为了明星建构个人形象主要的媒介平台。一方面公众通过微博了解明星的信息来满足自身需求;另一方面明星也需要通过微博来传
杨绛散文在文坛上具有独特的价值,其对文革记忆冷静的处理方式使其在众多反思文革的作品中脱颖而出。本文主要研究杨绛先生反思文革生活的散文,从其处世方式、表达方法、情感
《红楼梦》为中国古代四大名著之首,在国内外都有着深刻的影响力,被翻译成了许多种语言。《红楼梦》的两个英译本最为著名,David Hawkes译本The Story of the Stone与杨宪益
<正>人教版新课标教材必修一的“表达交流”部分,有一个专题是“人性的光辉——写人要凸显个性”。其中的“写法借鉴”部分列举了两则人物描
<正>踝关节扭伤是在外力作用下导致韧带损伤,以踝部肿胀、疼痛、跛行为主要表现的病症,常规针灸多取局部经穴。笔者自2009年6月至2013年3月,以缪刺阳池穴治疗踝关节扭伤56例,