主题搜索引擎的设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:qdmarie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络信息资源数量的急速增长,通用搜索引擎已经很难满足人们对专业化信息检索服务的要求。主题搜索引擎只搜索与特定主题相关的Web资源,能更好地满足用户对获取信息快速、准确的性能要求。实现主题搜索引擎,核心是设计一个面向主题的网络爬虫,改进网络爬虫中对页面的过滤方法和网络爬行的策略,将有助于提高主题搜索引擎的性能。经过对现有的各种主题相关度判断方法的分析,以基于语义判断的方法为基础,加入链接标签和元数据等信息作为判断因素,提出了综合使用向量空间模型和链接标签分析及元数据分析的页面相关度判断的方法。实验表明,该方法可以提高主题相关度判定的效率和准确率。在对目前各种搜索策略的研究的基础上,决定采用效率较高的基于内容评定策略进行网络爬行。针对基于内容评定策略中存在的“近视”问题,设计了一种基于当前页面URL的简单链接结构分析方法,综合使用内容评定和链接结构分析方法作为网络爬行策略。该方法能在一定程度上缓解“近视”问题,提高爬虫的效率。在通用搜索引擎的基础上,通过对其网络爬虫部分进行改进,设计和实现了一个完整的主题搜索引擎。实验结果表明,上述主题相关度判断方法和爬行策略可以有效地控制爬虫对主题相关的信息进行爬行,达到了设计要求。
其他文献
利用化学分析法、X射线衍射分析(XRD)、扫描电子显微镜(SEM)、热重分析(TG-DSC)等检测手段对电解锰渣、镁渣的化学组分、矿物组成、物化性能进行分析。根据分析结果,合理设计以锰渣
针对黄瓜、番茄进行喷雾后地面上有效沉积量、叶片沉积率、不同高度沉积率的比较试验,明确3种喷雾器中WS-16卫士型喷雾器比3WBS-16型和工农-16型喷雾器节省农药、农药有效使
将硫铝酸盐基促强减缩剂(SP-SRA)掺入到基准水泥中,并且按一定的比例设计了硫铝酸盐熟料-硬石膏-基准水泥的配合比,对宏观性能、水化过程、微观产物进行了对比分析。结果表明
实证主义者认为,辩证法是思辨的,是主观的,而他们则代表了科学的客观性.而阿多诺认为,实证主义者所把握的事实不是客观的事实,而是经过中介了的事实,他们所追求的客观科学实
幸福,昨天还像华尔兹的旋律,整个城市都在这个轻快、明亮的旋律中旋转;幸福,又像燃烧的火一样,让爱情溢满信心,挣脱地球的引力,仿佛气球在蓝天下自由徜徉。唐丰忧郁而多情的
期刊
宁冬,生于1969年。1989年参加工作,二十五年来一直工作在教育教学一线。她注重个人修养,以平常心去对待每一天,不断探索数学教学的新思路、新方法、新途径。
在语文课堂教学中,别出心裁、切实可行的导课设计,不仅能集中学生的注意力,而且能激发学生学习语文的兴趣,取得先声夺人、水到渠成的效果。
黑河市第五小学在教学实践探索中努力改变传统教学方式,实施“目标导学法”,以学定教、学教合一,推动了课堂转型,彰显了教学特色,实现了学校的可持续发展。一、定目标。树特色“目
金融是现代经济的核心。作为我国金融企业主体的国有商业银行,如不能有效控制信贷风险,不仅影响着商业银行的经营业绩和竞争力,严重时还将决定着商业银行的生死存亡,这样就有
《语文课程标准》明确指出:“语文教学应激发学生的学习兴趣,注重培养学生自主学习的意识和习惯,引导学生掌握语文学习的方法,为学生创设有利于自主、合作、探究学习的环境。