舆情挖掘系统的设计与实现

被引量 : 0次 | 上传用户:applechenli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的逐渐普及,网民数量不断增加,互联网成为了人们表达情感和获取信息的重要途径。互联网舆情也成为了社会舆情中重要的一部分,影响着社会事件的走向。近些年的网络舆情事件也使得政府机关部门、企业公司、高校甚至个人开始意识到掌握网络舆情信息的重要性。因此,舆情挖掘系统具有重要的意义。小型用户如中小型企业、高校、个人对于舆情挖掘系统有着较大需求,而市面上却没有特地服务于小型用户的舆情挖掘系统。因此,本文舆情挖掘系统立足服务于小型用户,分析了小型用户对网络带宽、硬件设备、舆情反应速度的要求,以及在这样的要求下舆情挖掘系统的技术难点。在此基础上设计了更加适合小型用户的信息采集系统、信息处理系统、信息分析系统,并加以实现投入实际应用。本文对于舆情挖掘系统的设计实现过程分为3部分:第一部分介绍了设计实现舆情挖掘系统各子系统的相关技术,其中包括信息采集系统相关的爬虫技术与链接排重技术,信息处理系统相关的正文提取技术,信息分析系统相关的中文分词技术,并比较分析了这些相关技术不同实现的优缺点,为后续的设计奠定了理论基础。第二部分根据小型用户的特点,权衡考虑网络带宽、硬件性能、舆情反应速度,设计出舆情挖掘系统的整体架构,再针对各个子系统进行设计。在信息采集系统中,本文设计了爬虫系统的各个细节。首先精选出采集目标,其次在网页采集时使用了动态更新采集频率的技术,最后设计了链接排重的方法。在信息处理系统中,本文提出了论坛首页分割的方法用于提取论坛首页的新文章链接,提出了基于模式的论坛正文提取方法用于提取论坛网页的正文,最后设计了发帖时间的提取方法。在信息分析系统中,合理分配系统时间,选择了准确高效的分词方法,为计算相关性、提取摘要提供了便利。第三部分首先介绍了在开发实现过程中对于开发环境和开源工具的选择,并阐述了本文舆情挖掘系统的功能实现,展示了实现成果。之后展示了本文舆情系统的性能,证明了其满足小型用户的需求。本文舆情挖掘系统对于一些技术的设计解决具有独创性,并满足了小型用户的需求,具有实际的应用意义。
其他文献
随着中国经济的高速发展,中国的住宿业市场也取得了长足的发展,竞争也日趋激烈。中国的住宿业经历了两次比较明显的市场细分,衍生出经济型酒店和酒店式公寓等新业态。相比较
随着国家改革开放政策的不断深入,社区的发展也进入了一个崭新的时代,新技术的引入将是提高社区服务质量的一个有效途径。目前的社区服务网站大都停滞于Web2.0的时代,当前最
古德曼从人类实践是从事符号活动的实践这一观念出发,提出不同的符号系统和样式构造不同的世界,因而世界是多元的这个观点。但他没有因此否认真理问题,而是以适合性作为检验
随着工业自动化程度的提高以及计算机技术的飞速发展,各种以通用计算机为核心、通用的A/D、D/A、I/O等板卡及各种外围辅助接口电路构成的的自动测试系统逐渐在各种测试应用中
中国传统文化作为博大精深的宝藏,其中关于商业文化的经营思想和管理方法,至今仍具有借鉴作用,尤其利用传统文化对处于当前世界性的金融危机的企业,进行企业管理变革和塑造,
近年来,我国邮政业发展迅速,在全球经济萧条、我国经济增速放缓的背景下,邮政业却在电子商务不断扩张的带动下,持续保持了高速增长。但高速增长也暴露出了邮政行业目前存在的
<正>党的十八大以来党和国家的事业之所以能够取得历史性成就、发生历史性变革,党的十九大以后我们之所以能够战胜各种风险挑战、推动经济高质量发展,归其根本就是因为有以习
服饰不仅具有保暖的实用功能,同时也承载着政治、经济、文化、审美、习俗等方面的诸多意义,是人类物质生活和精神生活的综合表征。作为一种外在物,服饰本身具有一定的形式,并
电子商务作为21世纪最具竞争力的商务形式,对经济发展发挥着越来越大的促进作用。随着电子商务的迅猛发展,物流在电子商务发展中所起的作用越来越大。中国企业的领导者已经意
当前,基于J2EE的Web应用开发逐渐成为企业信息平台开发的一个重要方向,企业信息平台可以极大提高企业工作效率,进而推进行业的发展。保险经纪公司是这些年逐渐发展起来的一个