微博电力相关主题数据抓取软件的开发与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:huyuxuan0601
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在近十几年来,随着网络速度的飞跃式提升,智能上网设备的大范围普及,一系列新颖的互联网社交媒体应运而生、发展壮大。其中,微博作为一种典型的社交软件,凭借其发布及时,操作便捷等特性成为了人们进行互联网社交时的首选。通过发条状态抒发情感已经逐渐融入到了人们的日常生活中,随着时间的累积,微博平台数据中承载积累了大量的用户真实情感。因此,如何收集并统计出网络上广大用户的情感动态是一个值得研究的问题。而国家电网作为一个国有特大型骨干企业,为客户供更优质的服务提是其永恒不变的宗旨。因此本文提出了一个能抓取互联网上电力相关主题信息的软件,分析其整体情感走向,能有助于国网公司及时群众的满意度及需求,使公司能更好的履行社会责任,更好的实现“互联网+营销服务”。本次研究对象为具有一定互联网代表意义的微博,针对微博上出现的众多与电力相关的信息数据,如何整理归类,如何有选择性的去提取有效的主体信息,本论文设计了一个程序,采用了当前的自然语言处理技术,该系统可以实现对微博电力相关主题的实时抓取,同时也可以展开针对性的情感倾向性分析。本论文的主要工作包括:1)本文开发并实现了一个爬虫程序,可在微博内定向实时抓取电力相关主题的信息。2)利用现有的开源中文分词器,收集网络上各类热门词汇,建立新的完善的词汇库,提高了本爬虫软件搜索信息的能力3)结合单词词典和规则级,提升现有的分析计算方法,完善新的电力主题相关词典。4)建立了一个微博电力相关主题信息的收集与分析系统,分析微博内对电力相关话题的关注度和情感倾向性。此次研究的过程中引用到了相对较多的技术,比如网络爬虫,同时还应用了多种目前的自然语言处理技术,还对相关的数据实施了情感分析,设计实现了相应的系统等,但在很多方面存在着不足,这些都需要展开进一步的优化。爬虫程序在实际应用中可以实现定向抓取,不过其在很多方面的表现不如爬虫框架,此次设计的爬虫程序在性能方面要稍弱一些,同时此次设计的爬虫程序有着相对较低的可扩展性,本文需要对前人的经验进行总结,对爬虫技术细节展开更更加深入的研究,这些都是需要努力做好的地方。
其他文献
目的探讨医学影像学实训课教学改革。方法在实训中逐步培养学员分析、综合解决问题的能力,针对实训课中存在的不足之处,首先改革教育理念、教学方法,调整教学大纲,加强网络课
经济新常态下企业生存发展压力逐渐增加,当代企业更是面临较多的机遇与挑战。在人才战略越发重要且对企业综合发展影响明显下,越来越多的企业认识到了招聘及培养高端人才的重
目的:探讨有无焦虑症状的抑郁症患者的应付方式与人格的关系.方法:对88例抑郁症患者及与之匹配的90例正常对照组进行抑郁自评量表(SDS), 焦虑自评量表(SAS), 艾森克人格问卷(
由于小井眼井可显著降低钻井成本,因此在国内外应用较广。但小井眼井具有井眼尺寸小、环空间隙小的特点,所以小井眼井固井难度较大,这限制了小井眼井的推广应用。为促进小井
媒体报道,600多家上市公司修改了公司章程,目的大多是为了防止被其他资金收购,其中有一项叫金色降落伞的条款,说一旦上市公司控制权发生变更,原有的董事、监事、总裁、高级管理人
报纸
经济的发展和城市建筑面积的增加会产生热岛效应,由此引发的能源消耗和环境问题日益突出。为了解决这些问题并实行可持续发展战略,研制可降低建筑表面温度的新型环保节能材料
目的:探讨抑癌基因OVCA1在体外是否具有抑制卵巢癌细胞A2780侵袭转移的作用。卵巢癌是最常见的女性恶性肿瘤之一,至今缺乏有效的早期诊断方法,发现时常已处于晚期,它的5年存
电解水制氢是促进现今社会绿色可持续发展的有效途径,长久以来人们对电解水的研究从未停止,而如何提高电解水的性能也成为研究热点,随着技术的进步,电解水析氧反应成为研究的重点。聚苯胺是一种拥有特殊光学和电学性质的本征导电聚合物,其合成成本低、有巨大的分子结构修改的潜力和特殊的质子掺杂机制的特点,注定了它是有很多可能的材料。它作为一种导电材料,被用于电池、功能膜和电化学装置等方面。除此之外它还有一定防腐蚀
目的:探讨幽门螺杆菌(Helicobacter pylori,H.pylori)感染与食管鳞癌发生的相关性。方法:应用Giemsa染色检测185例食管鳞癌手术标本和60例对照组(食管鳞癌手术切缘正常组织)