面向金融领域的分布式垂直搜索引擎研究与实现

来源 :山东财经大学 | 被引量 : 0次 | 上传用户:ctrl111shift
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着近年来电子商务、社会化网络、移动互联网以及智能化技术的发展,互联网上的信息呈现出爆炸性增长的态势,通用搜索引擎的检索结果出现出多、杂、乱的现象。并且用户对搜索引擎的要求也不再局限于仅为其提供相关的网页,而是期望搜索引擎能够给出某领域的深层次知识。然而,世界几大通用搜索引擎巨头无法涵盖如此众多领域内的搜索市场。因此,在未来中小型机构提供的领域化、专业化的垂直搜索服务必将有很大的应用价值。中小型金融机构受其经济能力和搜索方面技术实力的限制,其信息检索服务还停留在提供存储在数据库中的结构化信息的落后阶段。因此,如何利用现有的技术框架提升中小型机构提供高质量垂直搜索服务的能力是亟待解决的问题。本文提出了使用Hadoop开源分布式存储计算平台基于Nutch插件机制构建中小型机构垂直搜索引擎的技术方案。本文详细介绍了Hadoop平台相关技术的原理和优势,对Nutch插件机制进行了着重研究,分析了目前常见的领域聚焦算法和常见的中文分词组件的特点,介绍了常见的网页特征词提取算法。设计并实现了基于Nutch插件机制的金融领域聚焦爬虫和离线的关键词相关词语发现模块。利用3台PC机搭建了一个完整的能提供金融领域信息检索服务的微型搜索引擎。实验结果证明,该方案具备一定的可行性和实际的应用价值。
其他文献
智能用电是智能电网研究的热点、难点,灵活互动的供用电模式已成为智能用电的发展趋势,其核心特征是电网与用户能量流、信息流、业务流的灵活互动。本论文旨在研究用电设备主动
<正>企业是社会主义市场经济的重要参与者,其基本权利的保护问题越来越受到社会各界的普遍关注。对企业基本权利的保护手段主要有企业自我保护、社会保护、行政保护以及司法
从育苗设施的准备、播种与苗期管理及移栽技术3个方面总结了辣椒漂浮育苗技术。
传统的插管方法具有一定的盲目性,尤其是丧失吞咽功能且又有气管切开的病人,往往很难一次成功.反复插管不仅增加了病人的痛苦及感染机会,而且增加了工作量,甚至有的因得不到
正青春是生命的花季,是人生的重要阶段,有酸涩也有甜蜜,有收获的喜悦也有受挫的茫然。正值青春年华的你,一定也有自己的故事,把这些经历和感想记录下来吧,来引导更多的青年朋
<正>一、台湾地区全民健保的基本情况2011年9月3日,"台湾健康保险局"负责人戴桂英在海峡两岸医院院长论坛(2011)上介绍,目前台湾医疗保健支出占GDP的比例已经到了6.87%。在台
从品种选择、大田准备、适时播种、化学除草、肥水管理和病虫害防治等方面总结了水稻直播的栽培技术。
当前,在科技力量的支持下,人机操作界面被普遍应用于各种机器当中。PLC在处理数据时,对人机界面的操作性、简便性提出了更高的要求。PLC与触摸屏组织控制系统应用后,使PLC在
运动模糊图像在现实生活中大量存在,因此对运动模糊图像的复原研究非常重要。通过对运动模糊图像的数学分析,提出了将高斯-拉普拉斯边缘检测和Radon变换相结合的模糊角度估计的方法,并给出了算法实现步骤,最后通过Matlab仿真软件进行了验证。
在对传统算法Road Runner研究基础上,本文提出一种基于树型结构的包装器生成算法。在对训练样本进行匹配过程中,引入树型结构进行比较,算法运算效率明显提升,对迭代项和可选