基于多权重因子影响的网页排序改进算法

来源 :浙江农林大学 | 被引量 : 1次 | 上传用户:hengheng5251984
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
搜索引擎已经成为人们查找资料最常用的手段之一,而搜索引擎中最关键的技术是网页排序算法。目前,使用最广泛最成功的排序算法是基于链接结构的PageRank排序算法。PageRank算法在搜索引擎的成功运用,说明其是高效可行的,但是完全基于链接分析会导致主题漂移问题和忽视用户个性化问题,因此本文提出基于主题相关度与用户历史的PagRank改进算法,针对主题漂移和忽视用户个性化问题对PageRank算法提出了以下两方面的改进,并将改进算法命名为THPR算法:(1)利用TextRank对获取的网页内容进行分词,并计算提取每个网页的关键字。结合Word2Vec和VSM空间向量模型技术,计算查询词与网页关键词的相似度来判断网页与用户查询词之间的相关性,并依据此分配权重,以此改善算法存在的主题漂移的现象。(2)引入搜索历史因子,记录用户曾经的搜索词,并在本次的搜索中计算历史搜索词与网页关键词的相似度,使算法在权值分配过程中能够关注用户个性化,提高用户查询的满意度。由于THPR算法不再平均分配权值,而是从主题相关性和用户兴趣两方面来度量权值分配的大小,一定程度上弥补了原算法的缺陷。为了验证改进算法THPR的性能以及效率,本文搭建了一个实验系统,通过开源爬虫Heritrix获取实验数据,在分析了Heritrix爬虫的整体结构后,改进Heritrix爬虫的爬取逻辑,爬取网页上的特定内容。将爬虫爬取的网页数据进行去噪、过滤,存入原始网页数据库中。对数据库中的网站进行分析,计算每个网页的等级,建立索引,在用户输入界面输入搜索的关键字即可返回得到相对应的网页。实验结果表明,与PagRank算法相比,THPR算法的用户满意度有所提升,综合评估率也提高了约6%。不仅如此,THPR算法相较于基于锚文本的改进算法、基于时间权重的改进算法以及基于用户行为的改进算法,均具有优势。
其他文献
【摘 要】作为班级活动中的主要领导者,小学班主任在学生的教育和管理中的作用不容小觑。而班主任的一项必修课,就是班级管理。班主任应不断创新班级管理方法,通过营造良好的班级环境,对每一个小学生的健康成长,发挥积极的促进作用。本文首先分析了班主任班级管理的主要内容,剖析了现阶段小学班主任班级管理的具体现状;最后针对问题,提出了小学班主任班级管理的创新策略。  【关键词】班级管理;小学班主任;内容;现状;
利用电力驱动汽车、飞机、舰船等近来成为研究热潮,电机及其驱动技术是其研究的关键。由于与传统的三相驱动系统相比,多相系统开关器件耐压耐流小、可靠性高,更适合应用于高
本文介绍了一种采用新型纵杆离心式偏置电路结构波导耿氏振荡器的设计过程和实验结果,研究结果表明,振荡器的频率稳定度可以明显提高,输出功率大,该振荡器结构简单,加工方便,成本低
近年来,随着军队信息化建设步伐加快,国家越来越重视征集大学生应征入伍,希望通过提高兵员质量来提升部队的作战能力。经过多年的探索,大学生应征入伍工作越来越规范,可以继
从品种选择、施肥、育苗、大田管理等几个方面介绍来安县越夏露地番茄栽培技术,从而指导当地番茄生产取得更大的产值。
随着城市建设的发展,人们的生活水平在不断提高。安装工程在前期施工过程中,质量、操作工艺极为重要。否则,在工程验收交付使用后,因安装质量产生大量的维修工作,现将安装工
vasa基因和nanos基因在生殖细胞中特异表达。在脊椎动物中它们是原始生殖细胞的迁移和分化所必不可少的。vasa基因是DEAD-box家族的重要成员,其蛋白具有依赖ATP的RNA解旋酶活
【摘要】在平时学习中,学生经常会碰到到以前没有接触过的陌生题目,感到不知所措,无法下手。为此,我们教师应重视培养学生的自觉化归与转化意识,掌握转化思想的精髓,本文从常见的几个例子出发,介绍转化思想常用的策略,及使用它带来意想不到的效果。同时也使学生明白熟练扎实地掌握基础知识、基本技能和基本方法是转化的基础;具备丰富的联想、机敏细微的观察、比較、类比能力。  【关键词】转化思想 简化题意 解题应用 
高校古代汉语课教学内容包括文选、常用词、通论三方面,三者之间是互相联系的。针对教学内容的特殊性和差异性,具体的教学方法包括读译结合的练习式教学、古今比较的辨异式教
用高温熔融法制备了Er3+/Tm3+共掺杂无铅铋硅酸盐玻璃.测试了玻璃的吸收光谱和荧光光谱,分析和表征了Er3+、Tm3+离子之间的能量传递机制和传递效率,结果表明:在800 nm和1 550 nm光