基于P2P技术的多维数据集存储和查询研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:gnbsr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
联机分析处理(Online Analytical Processing, OLAP)是建立在数据仓库基础上的一种支持多维分析的决策支持工具,也是用户获得决策支持的主要手段。随着时间的推移和数据量的积累,传统的OLAP技术架构有待进一步改进才能更好的满足用户的决策分析需求。在Peer-to-Peer技术不断成熟的今天,利用多个OLAP网络节点之间的多维数据集(Data Cube)进行协调合作来完成决策分析,不仅可以极大地提高OLAP查询分析的效率,而且可以均衡OLAP服务器的负载。在实际的应用运行中,如何去实现P2P环境下各个节点之间的协同合作成为了数据仓库应用中的关键问题。本文根据上面提出的问题,建立了一种P2P网络中OLAP节点的决策需求由多个其它OLAP节点共同提供服务的模型,打破原来由单一服务器服务的方式,提升了OLAP决策分析的效率,均衡了OLAP服务器的负载。该模型主要是通过以下三个方面的设计来实现:(1)在已有的多维数据集优化存储策略的基础上,根据P2P环境的特点,利用多维数据集的维层次链的特性,本文提出将多维数据集按照语义维层次链和扩展语义维层次链的CSMD-Tree(Compress Semantic Multi Dimension-Tree,语义压缩多维数据树)模式进行Data Cube存储,能方便有效地实现P2P环境下不同节点之间的多维数据集的共享。(2)通过构建P2P环境下的OLAP网络框架结构,灵活地实现OLAP节点的动态加入和退出,并提出了一种按照扩展语义维层次链的多维数据集分布式查询DQDC (Distributed Query Data Cube)分析算法。该算法实现了P2P网络中语义级的多节点Data Cube数据共享,从而提高了P2P环境下的整体决策分析性能。(3)根据P2P网络环境的结构特性以及OLAP节点对多维数据的分析需求,将OLAP网络节点按照节点之间需求是否相同来进行兴趣划分。通过构建基于兴趣的虚拟层次网的基础上,提出了一种基于OLAP节点兴趣协助IADS(Interest Assist Data-Cube Search)的查询分析算法。该方法可以减少OLAP节点在进行查询分析时对多维数据集的搜索范围,进一步优化了P2P环境下对多维数据集的决策分析效率。
其他文献
Internet的发展使得各行业都增强了对IT的依赖,业务处理与IT的集成度越来越高,各行业都在开发关键使命型复杂应用程序,而这些应用程序对用户的可用性和性能日益成为关键问题。在
随着计算资源的飞速发展,深度学习的计算瓶颈逐步得到缓解,计算机视觉方向上的深度学习内容也日益增多。但在立体视觉的相关研究上,基于深度学习的研究并不算完善,而传统方法
网格安全问题是一个热门话题的研究,具有动态性和不确定性的特点。随着动态多结构的虚拟组织之间资源共享和协同合作的需求越来越迫切,网格技术正逐渐走向成熟。然而信任安全问
随着信息技术的急速发展,数据的规模呈爆炸式增长。作为数据分析和知识发现中广泛运用的技术,划分方法在很多领域已经得到了广泛的关注。图作为一种基本的数据结构在复杂网络
SAR(Synthetic Aperture Radar)图像分割一直是SAR图像研究的热点。SAR图像包含丰富的信息,包括边缘特征、区域形状特征、方向特征和纹理特征等。如何合理地提取和利用这些特
发布/订阅系统是一个满足信息的生产者和消费者互动的分布式中间件系统。在易物服务、物品交换等这类服务中,发布者除了发布信息,还需要具备选择订阅者的能力,发布者和订阅者
无线传感器网络是信息感知和采集的一场革命,在新一代网络中具有关键作用。数据融合技术是无线传感器网络中进行数据处理,获得准确查询结果,减少能耗的重要技术之一。由于传
网络抗毁性是深入研究复杂网络必不可少的一方面。在当今社会不同的领域和系统中,复杂网络抗毁性的含义有着一定的差异。在已有的大量文献中,大部分是针对抗毁性测度算法进行
软件种类的层出不穷及其版本的频繁升级,使得网络管理员在维护过程中工作量不断增加,负担也越来越重。如何简单、可靠的实现补丁分发和应用软件统一部署,成为网络管理员关注
协同过滤算法是推荐系统中应用和研究较多的经典方法,传统协同过滤算法的主要思想是基于用户对项目的单一综合评分挖掘用户的兴趣并为其做出推荐。然而已有研究表明基于单一