网络舆情监控与分析系统的设计与实现

被引量 : 0次 | 上传用户:hongguoboy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国信息化的不断发展,传统的信息传播机制与渠道在逐步让位于互联网技术,各种新闻网站、贴吧、微博、论坛等在民众中取得了广泛的认可和应用,也相继成为了民众表达其对某些事件活动的看法、观点、诉求和情绪等众多反馈的主要渠道,而如何应用计算机技术快速、准确、全面、高效的监控与分析这一渠道的舆情信息,是当前众多机构、专家和学者研究的热点问题。本文首先在对国内外舆情监控及其应用系统的发展过程、建设经验、研究成果等总结的基础上,结合国内现行解决手段和解决方案,对舆情系统的主要需求进行了整理和优化,得出了系统的需求内容,主要包括数据采集及预处理需求、舆情监控与分析需求、应用展现及管理需求、业务治理需求、系统安全及性能需求等内容。其次,文章基于网络爬虫、正文提取、中文分词及语义分析、文本聚类等技术手段,从舆情数据特点、数据采集方式、数据传输与存储机制、功能实现特性等角度给出了舆情监控与分析系统的整体架构以及设计思路,并从基础设施平台、数据采集、信息预处理、监控分析处理、Web应用这五个角度阐述了系统的模块功能设计方案,同时,文章也给出了系统的业务流程分析及优化、部署架构及实现途径。最后,文章基于上述需求分析、规划设计基础上,结合作者的实际工作经验,给出了系统的详细设计流程与实现方案,包括:对舆情数据采集、预处理模块进行了流程设计、功能设计,并给出了功能实现方案;基于向量空间模型及TF‐IDF算法、中文分词及DOM剪枝算法、文本聚类SinglePass算法等技术,对舆情分析模块的话题监控与跟踪、舆情热点筛选、敏感话题识别等子模块给出了详细的流程、模块功能设计及实现方案;从舆情展示、系统配置、信息检索、安全管理等角度基于MVC架构给出了Web应用的功能设计与内容实现。
其他文献
“三个代表”重要思想是对马克思主义理论的继承与发展。“三个代表”重要思想贯穿着马克思主义解放思想、实事求是、与时俱进的思想方法,蕴含着马克思主义运动、变化、发展
在课程标准和教学大纲的不断发展之下,我国的人文地理教材在不同的时期呈现不同的特点,初步发展阶段的人文地理教材政治色彩浓厚,主要为了凸显国家性质。在后来的发展之中,随
本文写作的背景是在经济发展“新常态”下,大学生创业作为转变经济结构和发展方式的一种重要内容,受到越来越多的关注。天津市政府在促进大学生创业方面开展了大量工作,取得
理论界争论已久的“飙车”和“酒驾”等行为被《刑法修正案(八)》正式纳入刑法的调控范围。从修正案修订至今,司法实践不足五年,在这期间,该行为在我国法律领域理论界与实务界存
幼儿期是孩子情绪能力发展的关键时期,情绪理解在儿童的情绪能力发展中具有极其重要的作用,幼)L阶段的情绪理解能力会成为幼儿今后成长中众多其他关键能力的基石,它在幼儿的
妇女家庭地位一直是社会学研究的重要议题,以往有关农村妇女家庭地位的研究,大都强调经济因素对女性家庭地位的重要影响。但本文通过对内蒙古Q镇一些农村的调查,发现90后妇女在
以实际工程为背景,通过数值分析的手段,分析盾构隧道在掘进过程中,对既有桥墩的影响。选取右线盾构隧道边缘距离桥墩边缘水平距离0.5m、竖向距离6.8m时、桥墩位于盾构双线之间、左
幼儿由家庭走向幼儿园是其适应社会生活的起点,在入园适应的过程中,幼儿原有的生活模式被打破,而父母由于对幼儿入园生活的担心,会出现焦虑现象,进而影响各自的生活。本研究
随着社交网络的快速发展,网络上评分信息迅速增加,用户要从如此浩瀚的数据海洋中获取所需要的信息变得越来越困难,搜索引擎技术对所有用户给出相同的搜索结果,为了满足用户的个性
改革开放以来,我国的经济迅速发展,而随着改革开放的不断深入,我国市场经济发展速度已经超乎人们的想象。人民的生活水平日益提高,对生活物品以及商品的需求不断加强,企业的发展处