基于遗传算法的主题爬虫策略改进

来源 :计算机仿真 | 被引量 : 17次 | 上传用户:WSLBCW
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对主题爬虫存在"主题漂移"的问题,为了快速抓取网页,提出了一种基于遗传算法的主题爬行改进策略。在现有遗传算法爬行策略的基础上新引入了PageRank算法,调整了以往网页主题相关度计算方式,以计算得到的网页PageRank和相关度值为依据来选择爬行中的遗传因子,并重新设置了适应度函数,在保证优越遗传因子(与主题相关且重要网页)被优先遗传的同时,减少了遗传因子在传递过程中的"主题漂移",从而使爬行到网页的重要性和主题相关性均有所提高。与以往基于遗传算法的策略相比较,在不影响查全率的情况下,与主题相关且
其他文献
来自22个国家的1000多名年轻专业选手将于2013年7月2至7日到德国莱比锡参加世界职业技能大赛,并在46个项目中角逐其职业培训领域的世界冠军。作为全球领先的机床品牌企业DMG公
新野县是豫西南农业生产大县,近年来农业生产发展迅速,农资投入增加,化肥、农药、农膜的过量使用与残留造成水体、土壤污染加剧,农业面源污染问题日益突出。针对污染现状,当
收集住院病人28例,门诊病人22例,分为湿热下注、肾虚不固、脾肾两虚三型辨证施治,分别以清热利湿、通淋泄浊、补肾固摄、分清别浊、健脾益气、温肾固本的法則进行治疗。结果5
2014年1~4月,中国台湾机床出口值达11.34亿美元,较上年同期增长3.6%。其中,2014年1月出口2.47亿美元,较上年同月下降13.9%;2月出口2.31亿美元,较上年同月增长16.8%;3月出口3.34亿美元,较上年同月
九四年二月十六日上午,贾志杰省长、孟庆平副省长及省计委、省经委、工行、建行的负责同志来到省机械工业厅现场办公,围绕全省“超计划、赶全国、上台阶、兢兢业业实现新突破
注射成型生产中,塑件翘曲变形的大小是影响塑件质量的主要因素之一,以汽车内装饰板为例,对影响翘曲变形的主要加工参数进行试验设计,由直交表进行参数的编排,对试验数据计算出望小
<正> 痛经停袋泡剂由当归、川芎、白芍等10味中药组成,对寒凝血淤型痛经有较好的疗效。白芍为该方中主要药物之一,其主要成分芍药甙具有
据悉,2012年世界贸易组织裁定欧盟对华模具山口的高额反倾销税违反世贸原则,随之取消了对中国模具高额的反倾销税,这为中国模具业出口欧盟扫除了一个障碍。
数据显示,2012年中国轮胎模具行业实现销售收入约30.1亿元,其中汽车轮胎模具实现销售收入18.7亿元,同比增长0.16%;2013年中国轮胎模具行业景气度回升,全年实现销售额约35.65亿元,同比增