互联网舆情监控分析系统的研究与实现

被引量 : 13次 | 上传用户:pengxianwei1986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的高速发展,网络给人们提供了前所未有的开放、便捷的信息共享与发布平台,越来越多的人通过网络来表达自己的意见、想法、情绪和态度,其中既包括对对事件的发展有着正面、积极作用的信息,也包括一些负面、消极的信息。同时,网络平台的开放性、直接性和隐蔽性使得网络舆论越来越重要地影响人们的意识形态。因此,对大量舆情信息的及时有效监控分析,对维护社会稳定、促进国家发展具有重要的现实意义。网络舆情监控系统与自然语言处理技术密切相关。受限于自然语言处理技术水平,传统的网络舆情监控系统,主要为话题识别的相关内容,而对舆情的情感因素关注较少。虽然也有学者对舆情情感意见信息挖掘进行了研究,但由于处理结果与语料相关性较高,导致实用性不足。近年来,随着自然语言处理研究的逐步深入,浅层语义分析开始崭露头角,并在相关应用研究中体现出相对词性标注、句法分析更为智能实用的优势。浅层语义分析是一种简化了的语义分析形式,它利用动词对句意理解的关键作用,以动词为中心对句子意义的进行了形式化表示。语义角色标注作为一种浅层语义分析,对句子中一些成分为给定动词谓词的语义角色进行了标注,具有分析任务定义明确、便于评价等优点。结合这种最新的自然语言处理技术,基于对现有舆情监控分析算法的对比分析,我们设计并实现了一个网络舆情监控分析系统,创新性的提出了:(1)一种新的结合HowNet中公开的计算词语语义相似性算法和基于字的倾向计算算法,并对现有话题识别与追踪技术进行优化整合;(2)通过对大量样本的统计分析,得到倾向性语言表现形态规律,具体表现为角色-特征性概率表和角色-情感性概率表,为后续分析提供客观数据基础。本文包括的主要内容有:(1)舆情监控分析系统框架设计与模块设计。根据网络舆情信息的特点,提出系统总体框架,并对信息预处理模块、信息挖掘模块和信息服务模块进行了设计。(2)舆情热点话题识别技术研究。对网络中一段时间内大量出现的某个新闻主体进行提取追踪,通过对ICTCLAS分词技术、文档频率特征抽取方法、TFIDF权重计算以及K均值聚类算法的有效整合,实现热点话题识别与追踪。(3)舆情信息浅层语义分析研究。主要利用语义角色标注工具,通过训练测试,对文本语义层角色进行标注。(4)舆情信息倾向分析研究。实现文本中意见、情感等信息的提取,主要包括情感词库建设、特征库建设、情感倾向计算算法研究以及语料知识发现等。本文所涉工作在国内相关事件和分析中得到应用,可有效辅助舆情监控并减少人为干预,必将在未来的网络信息管理中发挥积极的效益。
其他文献
糖尿病已经成为影响我国人民健康的主要慢病之一,近几十年来,随着生活方式的改变,患病人数和糖尿病前期人数进一步增加,由糖尿病导致的并发症、致残、死亡以及随之而来的疾病
本研究以浙江省西塘镇中心小学开展民间游戏活动的情况为主要研究对象,运用文献资料法,实地考察法,问卷调查法,访谈法等研究方法,以民间游戏与体育教学相结合为切入点。以民
近些年来,随着全球经济一体化进程的加快,解决“三农”问题成为党和国家关注的热点,反映在从2004年至2010年中央七个一号文件关于农业机械化的内容不断增多,内涵更加丰富,农
散文,作为一种重要的文学体裁之一,因其形散而神不散的特征,受到读者的广泛喜欢,尤其是五四之后的中国现代散文。虽然对于散文的研究,我国有着几千年的历史,但对于散文翻译的
目的:探讨氧气、压力泵雾化吸入疗法在治疗儿科呼吸系统疾病的效果。方法:将104例患儿随机分成两组,实验组采用氧气、压力泵雾化吸入疗法,对照组采用超声雾化吸入疗法。结果:两
大学生创业对缓解我国严峻的就业形势以及推动经济的发展具有重要意义,大学生的创业倾向值得关注,本课题就浙江省部分高校学生的创业倾向进行调查研究,运用调查问卷,个案分析
某桥梁上部结构为13.6+30+13.6 m拱梁组合体系的三跨预应力混凝土连续板拱桥。该桥的特点是将拱的水平推力由设置于连续板中的预应力束承担,由此组成拱梁组合体系。由于该桥
随着我国逐步成为全球最大的新兴经济体,快速成长起来的内地奢侈品消费者也变成全球奢侈品市场持续发展的重要支撑力量,曾一度以30%的增速令世界瞩目。随着经济下行压力的增
在经济体制转轨,工业化、城市化进程加快,城乡之间、地区之间的人口与劳动力流动空前活跃的形势面前,现行户籍制度特别是其中的迁移制度,与现实社会经济生活发展变化的客观需要已
上市公司会计信息披露质量的优劣,对于利益相关者在决策过程中面临的风险意义重大。因此,会计信息披露的质量倍受关注,需要相应的衡量标准和披露制度,以测度其会计信息披露质