互联网舆情信息挖掘与群体行为分析

来源 :武汉理工大学 | 被引量 : 11次 | 上传用户:lkjh321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的普及,国内互联网用户的不断增多,网络舆情逐渐渗透社会、经济、政治各个层面,网络虚拟群体业已成为推动互联网舆情发展不可忽视的力量。因此,基于互联网的舆情信息挖掘技术和网络群体行为研究越来越受到广泛关注。舆情是指一定时期内一定范围内的社会群体对某些社会现象和现实的主观反映。互联网舆情信息挖掘技术作为舆情主题检测的有效手段逐渐成为研究热点。然而,现有的互联网舆情信息挖掘技术在处理海量网络信息时曝露出很多问题,在网络群体行为分析方面研究尚不成熟,因此亟需在互联网舆情信息挖掘和群体行为分析的理论体系和技术方法上实现突破。本文利用网络信息挖掘的方法分析了互联网舆情信息挖掘的流程,针对网络舆情产生、传播的特点,对传统网络信息抓取和预处理技术进行了改进。此外根据舆情主题检测的特点和要求对传统的文本聚类算法进行了改进。基于社会网络分析方法对网络舆情群体的组织结构和行为规律进行了分析,并以博客圈子和论坛小组为例进行了拓扑分析和中心度分析,总结出了这两种典型网络群体的结构和行为。最后,本文基于上述研究,进行了互联网舆情监控原型系统的架构和功能设计。主要研究内容如下:网络信息抓取和预处理技术研究:在网络信息抓取阶段,结合互联网舆情信息实时更新,传播速度快的特点,本文设计了并发式增量式网络爬虫以满足网络舆情监控系统对不同网页来源的数据进行采集的需求,同时也解决了大规模网页爬行的效率问题。在信息预处理阶段,针对新闻和博客网页、BBS网页结构不同的特点采用了不同的净化技术,采用HTML Parser提取新闻和博客网页正文,根据BBS网页高度结构化的特点设计了基于DOM树和模板的BBS结构化信息提取,最终获得了可用于文本聚类的纯文本文档。互联网舆情信息挖掘算法,即文本聚类算法研究:本文改进了传统的TF-IDF公式,可以对网络信息形成的动态文本流进行特征提取,并考虑了网络新兴词汇对特征提取的影响,给新词赋予适当的权重提高了增量TF-IDF模型的质量。在文本聚类阶段,在进行文本相似度分析时加入“时间窗”的概念,大大提高了Single-pass增量聚类算法的效率,同时也降低了聚类算法对内存的消耗。基于社会网络分析的网络舆情群体行为研究:本文使用社会网络分析技术对基于某一舆情主题而聚集起来的舆情群体进行组织结构分析和行为监控,对网络群体和虚拟组织进行了拓扑分析、中心度分析和群体分析,并使用可视化社会网络工具绘制舆情群体网络图,将舆情群体的行为演变规律直观的展示给用户。在上述研究基础上,本文设计了互联网舆情监控原型系统的架构、功能模块和工作流程,为下一步进行系统实现和应用奠定了基础。
其他文献
如果说科学技术是第一生产力,那么工程就是现实的、直接的生产力。同时,工程活动也是人类最基本的社会活动方式。人类不但通过工程活动改变自然环境,为人类的生存和发展提供必需
美国通过教育政策法规促进教育平等,在一定程度上实现了教育机会均等、教育成就平等、受教育者社会和经济地位的提高,基本实现了社会平等的目标,但是也存在一些问题。美国通
南口-孙河断裂是北京市区隐伏的正倾滑活动断裂,其地震危险性备受关注.将槽探研究活动断层古地震的经验引入到钻探工作中,提出了通过土芯识别断层崖崩积层的模式,并采用三重
本文通过对突发事件总体应急预案中的组织结构进行研究,结合国内外应急管理组织指挥体系建设的研究成果,深入分析我国突发事件总体应急预案中组织体系的建设情况,找出导致实
阶级社会是人类历史发展的基本形式,当前,阶级存在于所有国家和民族之中。进入21世纪以来,经济全球化在为世界提供经济助力的同时,也造成了全球范围内"再无产阶级化"的现象。
中小服装企业物流流程长而复杂、物流区域跨度大、库存数量不明确等特点,根据这一特点,中小服装企业可以通过与第三方物流整合、构建服装物流信息平台及组建物流价值链联盟的
随着社会发展的进步,全民保健意识逐渐增强,药学服务在药店中扮演着越来越重要的角色。摘选一些国内外药店药学服务的相关研究文献做综述,为国内的药店药学服务的研究提供参
狄更斯的成长历程和社会经历决定了他的作品之中渗透了浓厚的人道主义色彩,他对于人道主义的阐释和弘扬体现在了作品的方方面面,值得深究其精神内涵。本文较为全面地分析了狄
基于建筑服务的进出口数据,通过构造"10国经济体模型"计算显示性比较优势指数和显示性竞争优势指数等贸易竞争力指标,对中国建筑服务贸易竞争力状况进行了国际比较,结果表明
通过对高职院校英语教学质量评价的意义、目的和高职院校英语教学质量评价的理论和方法体系的分析研究,探讨构建高职院校英语教学质量评价的模式,旨在充分地发挥评价的有效功