基于Lucene全文索引系统设计与实现

被引量 : 0次 | 上传用户:maye626
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在当今信息大爆炸的时代,快速从海量的信息中找到所求成为信息应用的核心任务。特别是企业级的数据散落在多种结构,不同的数据源之上,如何对数据进行结构化并提供统一的查询接口对于企业级的信息搜索是重大的挑战。企业内容搜索是一个较新的领域,它涉及到信息平台整合,数据管理,海量数据管理,信息检索等多种技术。目前的企业内容搜索技术,多是先将数据集中化,而后将搜索引擎技术融入到企业内容搜索中,通过构造全文索引来达到快速全面检索数据的目的。本文设计并完成了基于Lucene框架的全文索引系统。在Lucene只能处理文本文档的基础上,增加了对于Office系列文档,PDF文档,HTML文档的支持。全文索引系统通过对非结构化的本文进行分词,索引等处理构建反向索引。最终通过排名算法,将结果按照相关性的高低呈现给用户,从而达到快速精准的检索目的。最终系统向外提供统一的查询接口,提供简单的关键字搜索和带语法的高级搜索功能,增加了多字段搜索功能。提供给用户搜索界面这一对用户友好的检索方式,增加了对于拼音搜索的支持,用户通过输入拼音返回汉字来辅助搜索。返回的信息中包括关键字的高亮显示的功能,让用户能够从摘要中看到查询结果中是否为其所需。采用了基于词频统计的方法提取新词,提取后的新词将会被加入到系统的分词词典中,系统采用基于规则的中文分词方法,一个海量的词典可以提高分词的准确度。通过对于新词的识别,并将新词加入分词词典,提高了中文分词的准确度。加入拼音搜索功能提升用户体验。丰富的查询语法,使得检索功能更加强大。加入内容摘要使得用户能够更好的判断检索结果是否所需。
其他文献
王元寿,字伯彭,是晚明重要的传奇作家,其传奇创作己知者二十五种,数量在当时的戏曲作家中首屈一指,且艺术水准较高,现存世者三种。除传奇作品外,王元寿亦有诗文传世。作为晚
长江三角洲是中国戏曲艺术比较发达的地区。这里不仅孕育了中国戏曲艺术最早的成熟形式——南戏,而且"因源而盛",传承下许多丰富多彩的戏曲种类。长三角地区各主要地方戏曲剧
“世界公民”托马斯·潘恩思想研究是上个世纪80年代以来出现的一个重要学术课题。托马斯·潘恩最有名的著作是写于北美独立战争时期的《常识》,而写于法国大革命时期的《人
目的研究昆山市1987-2014年居民自杀死亡流行趋势和疾病负担,为昆山市预防自杀死亡提供科学理论依据。方法采用标化死亡率、潜在减寿年数(PYLL)、年度变化百分比(APC)等指标对昆
目的建立色谱-质谱联用方法测定大鼠血浆及组织中多柔比星浓度,用于盐酸多柔比星脂质体注射液大鼠体内药动学及组织分布性别差异研究。方法雌、雄两组大鼠经静脉给予盐酸多柔
唐宋时期是我国古代文学编辑活动的活跃时期,官编和民编活动相互补充。本文以姚铉及其编撰文选《唐文粹》作为目标对象,从编辑出版学角度出发,探讨背后蕴含的编辑理念。北宋
目的分析奥曲肽联合泮托拉唑治疗肝硬化并上消化道出血患者的临床效果。方法选择100例肝硬化并上消化道出血患者作为此次分析对象,选取2018年1月22日~2019年2月22日来我院就
学位作为现代社会评价人才质量的一个重要指标,受到全社会狂热甚至盲目的追求,升学、就业、转岗以及恋爱结婚,生活的方方面面都意将“学位”作为标准来考量一个人的实力和水
循环经济与可持续发展理念指导下的平朔煤矿区生态恢复与重建,有2条相互依存的生态产业链:一是以煤为主,电、化、氧化铝、建材并举的黑色产业链;二是围绕复垦土地开展生态重建,种
本论文主要内容可以用两部作品,《长恨歌》、《金锁记》,两位作家王安忆、张爱玲来概括。《长恨歌》为王安忆原创小说作品,被上海剧作家赵耀民改编为话剧剧本。《金锁记》则