基于Hadoop和Nutch的分布式搜索引擎研究与仿真

来源 :第十九届全国青年通信学术年会 | 被引量 : 0次 | 上传用户:plm0plm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网络的发展,网络中存储的信息量急剧增加,搜索引擎在网络中占据着越来越重要的位置.本文基于分布式处理平台Hadoop和开源搜索引擎框架Nutch设计并仿真了一个分布式搜索引擎.Nutch中相关的中文分词切分算法较为简单,识别效率不高,为了改进中文分词算法,本文引入了基于词典的中文分词器IK Analyzer,随后对分词效率进行了测试,测试结果表明中文分词效果有明显改善.
其他文献
我国南方民间流传以余甘加甘草浸盐水制成余甘卤,作为民间常备家庭药品,用以治疗风寒食积、消化不良、肚痛腹泻和呕吐,已为家喻户晓。然而在临床治疗上,未见其疗效报道。为
本文就无线局域网常见的DoS攻击方式展开研究,提出了一种基于信息增益特征选择和支持向量机的攻击检测算法.该算法通过信息增益特征选择算法,最终提取出9个用于鉴别无线局域
在现如今的英语教学过程当中存在着十分明显的两极分化情况,而且随着知识难度的不断加大、学科科目的增多以及课时减少等相关因素,这些都使学生在学习过程中产生了两极分化.
期刊
[摘要] 有口不能言是一种痛苦,有口不会言更是一种痛苦。说话的“质量”决定着交流是否进行、沟通是否有效,决定着人际关系是否和谐。本文浅析如何在人际交往中注意语言运用应遵循的原则以及语言沟通的环境。  [关键词] 语言人际交往运用    语言是沟通的桥梁,是人际沟通的重要载体。人类借助语言进行思想、情感和信息的交流。  语言缺少了智慧,便如同大地缺少了阳光。“良言一句三冬暖,恶语伤人六月寒”,“一句
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
拓扑发现是获取并维护网络节点的存在性信息和它们之间的连接关系信息,并在此基础上绘制出整个网络拓扑图,OSPF拓扑发现法便是其中的一种.传统采集OSPF拓扑数据的方法存在成
【摘 要】较强的音乐审美能力能够帮助学生陶冶情操,升华情感,净化心灵,在潜移默化中形成强大的精神动力,因此,提升学生音乐审美能力尤为重要。音乐教师在教学中要提升初中学生音乐审美能力就需要培养学生浓厚的音乐兴趣,实现音乐审美范式的灵活、高效教学。  【关键词】音乐审美;初中生;引导  音乐审美能力主要是指人们通过自己的审美方式来把握音乐世界的一种能力,通过这种能力人们能够感受音乐、记忆音乐、判断音乐
网络拓扑结构图的完整性和准确性对网络故障管理、配置管理和安全管理至关重要.主动的探测手段会对网络造成一定的影响,而现有的基于OSPF协议的网络拓扑发现算法很难兼顾效率
当前,国家大力推进素质教育,不断推进新课程改革,对小学数学教学的要求在不断提升.怎么样进一步减轻小学生的负担,调动学生学习的积极性,实现更好的学习效果?笔者在文中首先
期刊
男频小说是类型化最彻底的一类网络小说.其类型化的成熟主要表现为小说叙事要素的固化,尤其是结构模式的固化.男频小说的结构呈现出两个典型特征:局部重复,总体上升.在局部情