基于Hadoop的高校图书馆云平台设计与实现

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:cjbin1688
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
“图书馆联盟”是目前高校图书馆发展的重要趋势,其出于共享、互惠的目的,通过对图书、电子期刊等资源的共享,极大地提高了图书馆资源的利用率。但是我国的“图书馆联盟”建设工作依然处于初级阶段,由于行政管理体制等原因,我国众多的高校图书馆间相互独立,数据异构、“信息孤岛”等现象普遍存在。因此,若能够在保留各图书馆原有系统的基础上,建立高效率的信息共享平台,促进高校图书馆间的馆际合作与资源共享将具有重大现实意义。基于此目的,本文通过对Hadoop等分布式技术的研究与应用,设计并实现了对多个高校图书馆数据进行集成共享的高校图书馆云平台,通过对图书馆信息的集成与展示,协助高校图书馆进行更好的信息交互,进而促进高校图书馆实现合作与共享。本论文的主要工作如下:(1)构建校内图书馆的数据集成中心。针对不同图书馆间的数据异构问题,提出了一种基于Flume的数据集成方案,该方案通过改写的source与sink单元,使数据的抽取、清洗、补充、标准化等操作可配置化。通过该方案,实现了图书馆内的异构数据集成功能。同时针对原始数据与集成数据的同步问题,设计并实现了一种基于触发器的数据同步方案,保证了集成数据的有效性。(2)构建多校图书馆的数据集成中心。针对多个高校图书馆数据的海量、分散等问题,通过对分布式技术的研究与应用,详细设计并实现了一种基于Hadoop的数据集成系统,该系统通过Flume、Kafka、Storm、HDFS以及Hbase等分布式技术的有机结合,实现了多个高校图书馆之间的数据采集、处理、存储等功能。(3)构建图书馆云平台的可视化应用。针对云平台中多个图书馆数据的有效利用问题,通过MapReduce与Hbase,详细设计并实现了对集成数据的分析查询功能,并基于结果数据实现了云平台可视化应用,为高校图书馆间的信息交互提供直观的服务。通过最终的实例运行可知,本文提出的高校图书馆云平台可实现多个高校图书馆数据的集成与同步,可有效促进高校图书馆间的信息交流与资源共享,满足现阶段的现实需求,具有较强的实际应用价值。
其他文献
该文通过对刘庆邦的柔美小说文本的分析,揭示出刘庆邦的柔美小说在对中国田园牧歌型抒情小说风俗民情的描绘,田园牧歌情调的营造,人性美的讴歌的承续上,又表现出追求情趣美、
随着素质教育的实施和小学英语教育教学的改革,英语绘本(针对儿童的心理特点和认知发展水平而设计的一类以图画为主、文字为辅的故事书)以其特有的辅助教学的特点,在小学课堂内外教学中得到广泛重视。互联网时代的到来,促使学生和家长对于线上自主性阅读绘本的需求愈加强烈,虽然教育市场上也出现了一些提供绘本线上阅读功能的英语学习软件,但这些软件大多只是单纯的改变了纸质绘本图书的阅读形式,而没有彻底满足学生对绘本阅
目的探讨邻近房室环(二尖瓣环、三尖瓣环)间隔部起源特发性室性早搏/室性心动过速(PVCs/IVTs)的体表心电图特点及射频消融治疗的疗效与安全性。方法 70例特发性邻近房室环间
微藻营养价值丰富,含有多种高附加值的生物活性化合物。本文以生物量、蛋白质和多糖含量为指标进行优势微藻的筛选;对筛选出的栅藻(Desmodesmus armatus B38)进行培养条件优化和全营养素分析,评价其作为食品或饵料的潜在利用价值;对蛋白质和多糖进行分离纯化,研究其活性及结构鉴定;对微藻进行饵料的研制与开发,主要结果如下:以15株热带微藻为研究对象,对其生物量、多糖含量和蛋白质含量进行分析
磁固相萃取(MSPE)吸附剂具有比表面积大、磁性强、修饰方便、分离效率高、操作简便、可重复利用和环境友好等优点。本文介绍了各种MSPE材料的制备和表面改性方法,着重综述了
流媒体技术是目前在线网络视频应用中的关键技术,Flv视频格式是当前网络视频的主流格式。根据当前应用情况,分析基于Flv的流媒体系统的要素组成和当前应用的关键技术。
在高中教育中,体育教育是实现素质教育的基础。体育教学相对其他教学科目而言,创新体系是必不可少的一个条件,只有创新才能呈现给学生更多的新鲜感和直观感,才能激发学生的学
<正>性发育异常(DSD)包括一大组疾病,这些疾病的病人在性染色体、性腺、外生殖器或性征方面存在一种或多种先天性异常或不一致。既往称两性畸形,2006年欧洲及美国儿科内分泌学
伴随着教育体制改革的深入发展,教学效率问题越来越受到家长及社会的关注。在初中的数学教学课堂上,习题设计是训练学生数学解题能力、帮助学生融会贯通的重要教学流程。广大
提出了一种反演边界层以下气溶胶消光系数垂直廓线的方法。设计了一种以电荷耦合器件(CCD)为探测器、激光器为发射端的收发分置激光雷达系统(CCD激光雷达)。基于此系统测量了