改进的Shark-search算法在网络采集中的应用

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:ribenandchina
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Shark—search是一种依据链接价值的高低进行优先采集的算法,用于主题信息采集系统时由于只考虑了网页文本和链接锚文本与主题的相关性而忽略了网页的组织结构特性,在抓取有较多噪音链接的网页时效果欠佳。基于网页组织结构特性的分析研究,提出了一种基于网页主题分块的Shark—search算法。该算法在经典Shark—search算法的基础上依据网页组织结构根据网页布局标签对页面内容进行分块,从网页,块和链接三个层面与主题的相关性得到链接的综合价值,因而具有自学习功能,能统计学习与主题相关性较大的块特征,并在
其他文献
2008-2009年于河南农业大学第三生活区防雨棚中采用盆栽试验,以香料烟品种芸香巴斯玛1号为供试品种,研究了水氮互作对香料烟烟株生长发育、生理生化、产量品质以及植烟土壤养
某型防化装备是我军防化洗消分队的重要技术装备之一,是防化洗消分队战斗力的重要组成部分。新配发的该防化装备技术含量高,结构也较为复杂。由于对该装备故障规律缺乏充分的
明初法律形式十分混杂,律之外还存在诰、令、例、榜文,直到明朝中后期统治者废除诰、令、例、榜文,只保留律例合编的体例才使得法律形式归于统一和简化。为何独留例与律文合
在演奏经典协奏曲——尤其是那些作曲家没有在原作中为演奏者规定华彩段的协奏曲时,选择什么样的华彩段能够更好地诠释作品,在炫技的基础上,表达出自己对作品的理解并加以发
股票回购又称股份回购,是指上市公司利用自由现金或者通过债务融资,以一定的价格从股票市场上购回本公司一定数额的发行在外的普通股予以注销者作为库存股的一种资本运作方式
目的观察中晚期宫颈癌放化疗同步治疗不同方案的方法及临床疗效。方法选取186例IIb~IVa期宫颈癌患者为研究对象,随机分为两组,TP组92例采用紫杉醇+顺铂方案同步放化疗治疗,DDP
投资、消费和出口是拉动经济前行的“三驾马车”。改革开放以来,我国经济年平均增长率接近10%,可是这种奇迹式的经济增长主要是靠投资和净出口拉动的,消费对经济的拉动作用显
生命从法学的角度上看,仅指自然人的生命,并非泛指一切生物的生命,当然也不包括法人和其他组织等有拟制人格的主体。生命具有至高无上的价值,其是其他一切权利存在的基础,自
抗日战争时期的中美关系,如政治、外交和军事关系等历来是学者们研究的热点问题,但对于这一时期美中之间的经济关系,关注相对有限,多集中于从美国援华的角度来论述此时期的美
随着我国社会主义市场经济的飞速发展,人民生活水平的不断提高,夫妻财产状况呈日益复杂化和多样化的趋势,夫妻财产分割问题成为离婚诉讼中双方当事人争议最多的问题之一。我