数据仓库中基于演化计算的实视图查询优化

来源 :武汉大学 | 被引量 : 0次 | 上传用户:mavylin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据仓库是一个面向主题的、集成的、不可更新的且随时间不断变化的数据集合,主要用于有效地支持决策支持查询。随着数据仓库的规模不断增加,这种涉及大量数据的复杂决策查询是非常耗时的。数据处理的低效意味着资源的浪费,因此,较高的数据查询效率对数据仓库来说是很重要的,是数据仓库系统设计的一大系统目标。为了提高查询性能,一种有效的方法就是使用辅助数据回答查询。在现代数据仓库系统中,一种常用的辅助数据就是实视图:将用户常用的查询或最可能的查询模式计算出来的结果或者中间结果的物理存储。有了实视图,基本上不再需要对原始数据进行处理,而只需要在实视图的基础上进行一些简单的计算便可以完成复杂的查询。在使用实视图提高查询效率的时候,必须解决两个重要的问题:实视图选择和实视图最优重写。本文就这两个问题进行分析研究并提出了详细的解决方案。实视图选择:实视图选择就是针对一个查询集,在给定的某些资源约束下选择一个视图集进行实化,使得该查询集的查询响应时间最小。首先,全面分析了数据仓库系统中实视图选择的特点、难点以及传统实视图选择方法的弊端之后,系统地介绍了分布估计算法的特性、方法,并采用分布估计算法从“宏观”层面上对群体建立数学模型来解决实视图选择问题;同时,提出两种混合遗传算法GEDA和BMUTGA,在后代的产生过程中同时利用全局统计信息以及局部信息来克服GA和EDAs的缺点,从而更有效地解决复杂的实视图选择问题。通过实验来验证所引入的UMDA以及所提出的GEDA和BMUTGA算法的求解质量和求解效率。测试数据及来自TPC-D的基准测试数据以及多种模拟数据集。实验结果表明,在不同的空间约束,不同的查询分布和视图大小分布下,本文所引入和提出的算法优于经典遗传算法。实视图最优重写:实视图最优重写问题就是对于给定的一个用户查询Q和实视图集V,找到Q的一个最优(等价)重写R。首先,与传统的查询优化进行了对比,全面分析了数据仓库中实视图最优查询重写的特点、难点以及传统的使用实视图最优查询重写方法的弊端之后,系统地介绍了启发式方法和遗传程序设计的特性,并分析了用启发式方法和遗传程序设计有效地解决利用实视图最优查询重写问题的可能性。其次,提出了两种新颖的基于实视图最优查询重写的算法BSHS以及SRGP来解决这个问题,主要贡献如下:(1)这两种算法基于包-集语义,这种语义被广泛的应用于当今的关系型数据库。在这个语义下,基本关系并不包含重复元组,而查询结果可能包含重复元组;(2)本文的算法不仅能处理合取(选择-连接-投影)查询还可以处理聚集(SUM/COUNT)查询;(3)所提出的算法不仅可以使用多个实视图重写还可以使用单个实视图重写,从而保证所产生的重写的近似最优性。通过模拟数据集,从求解质量和运行时间两个方面对算法进行了比较,验证了本文提出的启发式方法BSHS以及基于规则的遗传程序设计SRGP的有效性。
其他文献
蛋白质是生命大厦的重要基石,揭示蛋白质结构与功能之间的关系对于预测蛋白质-蛋白质相互作用、蛋白质识别和药物设计等有着重要意义。众多来自生物、化学、数学、物理、计算
[摘 要] 万寿宫是净明道的主要活动场所,在全国乃至全世界都是独一无二。对万寿宫民俗文化资源进行整理和挖掘,使之成为旅游发展的新亮点,对弘扬江西地方优秀民俗文化、促进南昌经济发展具有重要意义和实用价值。   [关键词] 万寿宫 民俗文化 保护 开发 思考    万寿宫民俗是由江西民众参与创造、享用和世代传承的生活文化,丰富多彩、特色鲜明,具有浓郁的江西地方特色。万寿宫民俗文化是一个可供挖掘的文化资
文章通过试验研究,分析了喷头的喷雾均匀性及其影响因素。借助由哈尔滨博纳科技有限公司开发研制的喷雾性能综合试验台,通过试验平台测试了变量喷雾喷头的喷雾均匀性;研究和
作业成本法是环境成本计算的有效方法。在借鉴有关高污染行业应用作业成本法经验的基础上,本文探讨了印染企业应用作业成本法计算环境成本的一般框架,包括印染企业环境成本的
本文研究了快速镍快速铁刷镀层在干磨损和润滑磨损条件下的磨损特性,结果表明,干磨损条件下,快速铁镀层耐磨性优于快速镍;润滑磨损条件下,结果正好相反。将快速铁刷镀工艺应
VaR模型已经成为国外大多数金融机构衡量金融风险和进行风险管理的主要方法之一。该文介绍了VaR模型的基本内容,并就VaR模型在银行信用风险管理中的应用做了详细分析,然后指
[摘要] 商业银行在金融体系里占据着重要的地位,其经营的效率直接影响了整个体系的效率。目前我国商业银行在内部控制上存在制度不健全,缺乏有效风险评估等问题,只有解决了这些问题才能保障整个银行业的稳健发展。本文在借鉴西方国家商业银行先进经验的基础上,结合我国的国情提出了一些建议。  [关键词] 商业银行 内控 有效性    一、商业银行金融安全与内部控制    商业银行作为金融体系的核心,其经营的成果
<正> 1 概述图1是混凝土搅拌输送车搅拌筒的侧面图,它是由圆柱、圆台和球缺结合成的筒体。在搅动过程中,进料口和出料口之间由于高度为A—B的叶片将混凝土拌合料挡住,不会从A
【名医档案】$$ 黄少宏,现任广东省口腔医院副院长、广东省牙病防治指导中心副主任。$$ 1988年中山医科大学毕业,兼任中华口腔医学会预防口腔医学专业委员会常务委员、中
报纸
<正> 中国国际贸易中心工程是中外合资建设的规模最大的综合性建筑群,占地14公顷,总建筑面积42万m~2。为满足国际商业、贸易、旅游、会议等服务要求,整个建筑装修考究,装饰豪