基于相关度分析的主题聚焦爬虫研究

被引量 : 0次 | 上传用户:ilqiqi2010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络和信息技术的迅猛发展,互联网中蕴藏着丰富的海量数据,如何有效地从这些数据中过滤出特定主题或领域的信息,是广大研究人员面对的一大问题。本文研究基于向量空间模型的TF-IDF文本相关度分析方法的主题聚焦爬虫,通过种子URL作为采集入口快速采集网络信息,利用网页内容抽取、主要内容和页面链接解析技术分析页面主要文本,使用基于VSM的TF-IDF技术分析文本与领域主题的相似性,以此来达到聚焦领域相关网页的目的。
其他文献
马悦然多次在公开场合说,“在我看来曹乃谦也是中国最一流作家之一,他和李锐、莫言一样都有希望获得诺贝尔文学奖。可15年来没有出版社愿意出版他的东西,因为他没名气。”食
在新经济条件下,企业面临的竞争十分激烈,因此企业迫切需要制定以消费者需求为导向的并且符合市场经济条件的营销策略。本文是以消费者需求为导向,将消费者购买动机与产品价
<正>与普通高中新课程相对应的"新高考"开始于2007年,至2010年,全国有17个省区进入"新高考"。根据笔者的调查,目前绝大多数学校仍然采用传统的模式和方法组织"新高考"的复习
<正> 大豆是需水较多的作物,滴灌是大豆高产稳产的有效措施之一。必须掌握大豆的需水规律,根据大豆的长相,降雨情况,土壤水分状况,适时滴灌。大豆耗水量受着多种因素的影响,
目的:观察运用艾灸百会为主结合针刺方法治疗失眠症的临床疗效。方法:60例失眠症患者,随机分为治疗组即艾灸百会为主结合针刺组30例,对照组即单纯针刺组30例。两个疗程后分析
<正>年龄相关性黄斑变性(AMD)是老年人主要的致盲眼病之一,是多因素共同作用的结果。尽管目前AMD的发病机制尚未完全阐明,但是近年来在遗传、炎症、氧化应激等方面的研究取得
对食用菌多糖的提取、分离纯化、定性定量分析、活性研究和临床应用等研究进展进行了综述,指出了目前存在的不同食用菌多糖较难鉴别、真菌多糖提取纯化工艺需进一步加强、食
<正>心脏神经症(cardio neurosis),又称心脏神经官能症,是以心脏不适为主要症状的神经官能症,其临床特点为心血管症状与神经功能紊乱合并出现。患者主观感觉复杂多样,包括心
随着国家财税体制改革的深入,铁路运输企业也不可避免的加入到改革之中,营改增的实施将影响铁路运输企业的各个层面。本文首先介绍了营改增实施的相关情况,然后分析了营改增
<正>一、唐山——资源型城市转型的紧迫性(一)资源日趋匮乏,社会问题日益突出唐山是一座"因煤而建、因钢而兴"的典型的资源型城市,是全国焦煤的主要产区、全国三大铁矿区之一