基于Hadoop的PageRank算法的研究与改进

来源 :成都信息工程学院学报 | 被引量 : 0次 | 上传用户:W6216286
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统Page Rank算法单纯从网页链接结构进行分析而未考虑搜索主题漂移、侧重于旧网页以及忽略用户兴趣的问题。为提高搜索引擎检索效率,通过增加主题内容相关度、有效点击频率和时间反馈因子对算法进行改进。使用分布式计算框架Map Reduce实现改进算法并部署运行在Hadoop集群上。对实验数据进行对比分析,发现改进后的Page Rank算法在Nutch上的爬取索引效率提高7.209%,用户在网页检索效率上提高10.12%,查准率提高21.4%,同时,随着集群节点数和数据量的增加,搜索引擎的检索效率逐渐增强。
其他文献
大学任课教师的职责有别于初中、高中老师,要做好一名现代的大学任课教师,就要在教学理念、教学方法等方面不断地探索、尝试。大学任课教师,必须对教学内容非常熟悉,多途径了
农村人口占我国总人口的大部分,但是农村图书馆事业却十分落后,造成了知识贫困的差距在城乡进一步拉大,给我国的和谐健康发展增添了隐患。现阶段,农村图书馆发展面临很多障碍,但农
学习者自主对教材提出了更高的要求。本文基于相关的外语习得与教学理论,结合我院英语专业教学实际,提出英语专业自主学习中进一步研发教学资源,建立资源型学习的必要性,并就
结合汽车独立悬架机构的特点,主要探讨了如何用导数法分析独立悬架机构运动特性。汽车三种不同运动状态(平路、不平路面、转弯)下,利用导数法解析车辆独立悬架机构的运动情形,并用
韩国被认为是经济成功的范例,同其他发展中国家相比经济的不平等是低水平的。然而到2003年,韩国的国家调查资料表明,阶层的不平等构成了韩国经济不平等的最重要部分。由于缺乏经
介绍了采用“A/O生化一混凝沉淀”工艺处理印染废水的工程实例。当进水CODcr≤600mg/L,色度≤550倍时,出水可达到国家《纺织染整工业水污物排放标准》(GB4287—1992)一级排放标准。
国家助学贷款制度施行以来,经过不断的修正完善,取得了积极的效果,但在实施过程中也遇到了很多问题,一定程度上影响了国家助学贷款制度的持续健康发展。本文在厘清国家助学贷款的
通过地质勘察,查明路基土的性质,设计对处理方案进行比较,选择用水泥土加固方案,效果较好。
通过对移动推荐系统与传统推荐系统进行对比,从网络、设备、用户3方面详细阐述了移动推荐系统与传统推荐系统的主要不同,并分析了移动推荐系统的3大特点:网络移动性、设备便携
本文分析了火电设备噪声产生的机理,对火力发电设备所产生的噪声进行了综合整治,对设备的进气处噪声采取安装消声器的方法,对未达到降噪标准的部分通过在发声设备外侧敷设吸