基于NLP与分布式爬虫的故事化资讯系统

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:gyzviking
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在当前这个互联网大数据时代,各种网络新闻资讯的获取也越来越容易,新闻资讯的更新速度也越来越迅速。基于新闻的时效性,很多新闻资讯都以时间序列为主要的叙事方式,因此在展示新闻内容和新闻线索的时候,时间线就成为了用户与新闻交互中很重要的一环。每当有重大新闻事件发生时,相关的跟踪报导的时间跨度很长,在同一时间下又有多家媒体会对此新闻进行报导,最后导致新闻信息重叠,造成信息获取过多和时间的浪费。因此对于用户来说,如何能快速获取到自己关注新闻的全部进展就成为了一个比较难解决的问题。所以为了解决这一问题,开发一款以时间线为线索的资讯系统就很有必要。基于NLP与分布式爬虫的故事化资讯系统可以整理出一个连续报导事件的发展脉络,并将整个新闻的动态按照时间线或者故事化的方式呈现给用户。故事化资讯系统主要分为分布式爬虫、自然语言处理算法、系统管理端和展示端四个模块。采用Scrapy-Redis分布式爬虫技术来实现新闻资讯的实时获取,通过pyltp工具和Text Rank算法来实现对新闻文本的时间提取和摘要生成,然后由基于Spring Boot框架实现的管理端将数据传递给展示端,最后将整理好的新闻资讯呈现在展示端。本文将对系统各个模块的设计工作与功能实现进行详细的介绍。该系统的使用能满足用户对新闻资讯的实时获取,在大大缩短用户搜集新闻信息时间的同时也能满足用户对新闻资讯发展动向全面了解的需求。本人主要负责该项目的前端部分工作以及NLP模块时间提取和摘要生成的设计与实现。
其他文献
目的 探讨老年股骨颈骨折患者行髋关节置换术后髋关节功能恢复的相关影响因素。方法 回顾性选取2015年1月至2020年10月济南市长清区人民医院收治的老年股骨颈骨折患者100例,所有患者均行髋关节置换术,并术后随访1个月。按照髋关节功能评分标准(Harris评分)判定患者术后髋关节功能恢复情况,并将其分为恢复良好组(67例)和恢复不良组(33例)。对两组患者临床基线资料进行单因素分析(t检验和χ2检
“拼贴”首先出现在立体主义绘画中。二十世纪初,艺术家们运用拼贴的创作手法将非绘画材料应用于艺术作品中,将异质元素与画面内容相结合,打破传统绘画技法,对主题进行意向表达。随着艺术流派的更迭,艺术家的美学理念也在不断更新。拼贴作为艺术领域的一种新的表现方式,不再单纯作为一种纸上绘画技法存在,它打破固有的思维方式,从二维绘画转向三维空间,重塑元素的视觉体系,用拼贴理念表现出丰富的象征意义。将拼贴手法作为
在艺术创作中,画面的情感表达是基于对社会生活的体悟,在现当代的绘画领域中艺术作为多元化、多样化的形式存在,而创作的情感大多都是基于创作者本身的环境和社会形态。在本篇论文中主要以《万物之声》系列为主,突出环境问题作为本篇论文的出发点,以黑白木刻中刀法运用和笔者主观情感来呼吁环境问题,引发观者的共鸣。本篇论文通过以下部分来阐述:第一部分,讲述《万物之声》创作的来源、目的及创新之处;第二部分,介绍前人如
随着二十一世纪机器人学的兴起,以及国家十三五、十四五的规划重点项目中提出推动人工智能技术在各行业的发展,要大力发展机器人在工业、军用和服务等领域中应用,机器人的研究已经在快速发展。2018年到2021年更是迎来了高速的增长,随着各个领域的高新技术的提升和核心部件制造技术的不断进步,服务机器人需求潜力巨大,市场中的应用场景不断扩展。其中在公共场所、机场车站、社区和家庭的服务以及在2019年抗疫中的医
阅读是学生学习英语的必备技能。良好的阅读能力和阅读兴趣对学生的英语学习具有重要意义。但受应试教育的影响,在目前的初中英语阅读教学中,教师更加注重语法、词汇等语言知识的教学,常采用注入式的教学方法,忽视了阅读文本的深层意义,致使学生的阅读能力和阅读兴趣不高。因而如何以有效的方式调动学生的阅读兴趣、提高学生阅读能力,是现在一线教师和研究者需要解决的问题。“阅读圈”模式秉承以学生为中心的教学理念,能够提
亲子关系是人生中形成的第一种人际关系,也是家庭中最基本、最重要的一种关系。小学阶段是个体身心发展的关键时期,良好的亲子关系为以后的成长打下坚实的基础。处于小学阶段的学生身心发展具有不成熟、不稳定等特点,随着时代的快速发展,他们的思想观念与父母之间的差距越来越大。在他们进入中年级以后,课程的增多,课业负担的加重这些因素都会造成他们与父母之间矛盾的频发,冲突的增多,使得他们之间的亲子关系紧张,进而影响
企业民主管理制度是我国基层民主政治建设的重要内容,是社会主义民主制度的组成部分。在社会主义国家,人民当家作主不仅要实现全体人民的政治权利,还要实现人民群众的经济权利和社会权利。工人阶级和劳动人民只有在生产活动和社会活动中实现了自己的权利,其民主权利才有坚实的基础。新中国成立以来,在党和国家的高度重视下,以职工代表大会为主要形式的企业民主管理制度不断发展和创新。在中国特色社会主义新时代,健全充满活力
目的:应用体素内不相干运动(intravoxel incoherent motion,IVIM)成像评估原发性肾小球疾病(primary glomerular diseases,PGD)肾脏弥散和灌注变化情况,探讨IVIM定量参数与估算肾小球滤过率(estimated glomerular filtration rate,e GFR)的相关性,以及IVIM对原发性肾小球疾病的轻、中、重度肾功能受损
高校书店是校园重要的人文地标,是建设学校精神文明的重要阵地,它承载着传承文明、推进素质文化教育的重要功用,是校园文化重要的组成部分。国家有关部门十分重视高校书店的建设,制定了一系列的扶持政策,掀起了高校书店建设的热潮。但新涌现的高校书店在空间设计上往往照搬社会书店模式,形成了千校一面、文化底蕴缺失的问题。校园文化是一所高校的精神坐标与灵魂基石,它集中反映着高校的一切特征、规划和发展的需求,以校园文
随着工农业的快速发展以及人类活动的加剧,水体硝酸盐污染日趋严重,特别是与人类生存和生活紧密相关的地下水污染,引起越来越多人的关注。地下水中硝酸盐(NO3-)含量超标会对人类健康和自然环境产生巨大威胁。如何有效修复地下水中硝酸盐污染,发展绿色高效的硝酸盐去除技术,一直是水污染控制与修复领域的研究重点。目前去除水体中硝酸盐的方法主要有生物反硝化脱氮法、物化法、活泼金属还原法和光催化还原法。其中光催化法