分布式数据仓库中数据调度机制的研究与设计

来源 :北京邮电大学 | 被引量 : 7次 | 上传用户:suqingcsj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着对国内各厂商对经营分析和决策支持重视程度的加剧,作为经营分析、决策支持、数据挖掘等方面的基础,数据仓库的建设越来越引起人们的重视,数据仓库建设的好坏,直接影响到经营分析、决策支持、数据挖掘的效果。为了更好的支持不同级别、不同业务的经营分析,数据仓库的建设逐渐由集中式转向了分布式。目前,分布式数据仓库建设中存在着很多问题:规则调度、数据传输、一致性维护、即席查询、数据冗余、模型设计,如何更好的解决这些问题,是目前分布式数据仓库设计与实施的重点。 分布式数据仓库调度分为全局数据仓库规则调度和局部数据节点规则调度两个方面,每个方面的建设过程又包括数据采集、ETL、数据展现三个过程,全局数据仓库和局部数据节点之间、过程内部、过程之间存在着复杂的关系。如何设计一个数据调度的方法,如何在保证数据调度正确性的前提下尽可能的提高系统效率,实现并行性,尽可能的利用分布式系统带来的效率优势,是分布式数据仓库调度所要解决的问题。 作者在三年的数据仓库建设中,深入研究了UBIS(United Business Information System)系统规则调度的设计过程,提出了信息与控制分离的设计方案,基于MVC设计模式,作者把整个算法分成了3个部分,模型、视图和控制,有效地实现了信息与控制的分离,模型、视图和控制之间相互联系又相互独立,各个模块的改变并不影响到其它模块,使得整个算法更加灵活,更容易维护。 接下来,作者对UBIS(United Business Information System)系统一致性维护过程进行了深入的研究,归纳和总结了现阶段UBIS一致性维护的整个流程,分析了整个流程的利弊。之后,作者提出了一种基于strobe的分布式数据仓库一致性维护算法,描述了更新检测、操作控制、更新控制、错误处理等关键性问题。为解决分布式数据仓库建设中存在的问题提供了参考。
其他文献
薛东生今年52岁,是通化市二道江区三道江村党总支书记兼村委会主任。他生在农村长在农村,受过穷,吃过苦,靠党的好政策,白手起家,经过不懈的奋斗,成为拥有400多万元资产的富裕
软件重用是提高软件开发效率的最有效方法之一。但仅仅程序源代码级的重用并不能给软件开发效率带来数量级的提高。以重用的思想指导整个开发过程更为关键。框架是近几年出现
举剑治腐力千钧,风清舵正行自远。近年来,柳州市纪委监察局认真贯彻执行党的反腐倡廉路线方针,结合柳州市改革与发展的实际,围绕经济建设这个中心,解放思想,创造性地开展党风
随着多处理器和多核计算的兴起,并发程序的验证逐渐成为学术界广泛关注的热点问题之一。然而,由于并发程序本身存在的线程交互性,使得程序的执行不具备确定性,即在相同的输入
随着移动通信的普及,手机或其他手持移动网络通信设备(统称移动终端,本文交叉使用二者)成了人们在网络世界的“身份证”。对移动终端的搜索和定位需求也随之而来,本课题通过研究移
近年来,伴随着不断发展的微机电(Micro-Electro-Mechanical System,简写为MEMS)传感器技术、信息融合理论、普适计算技术等,人机交互技术也发生了翻天覆地的变化,由以往的人去适应
2008年4月15日,对于辽宁电视台来说,可以算是一个新的起点。辽宁电视台广告传播中心“诚创天下,携手共赢”晋江站恳谈会于当天成功举办。这次恳谈会可以说是辽宁电视台在晋江
现有的Internet的三层/两层的用户数据传输平台的传输效率低下、难以对未来不同服务质量的应用数据流提供服务质量保障。同时,密集波分复用技术为将为未来电视网、电话网和传
汶川特大地震已过去快三年的时间了.面对这场空前灾难,政府信息公开程度前所未有,我国媒体及时、透明、全面地呈现了地震所造成的巨大灾难,呈现了党和国家领导人在灾害发生后
目的 分析双切口入路治疗复杂胫骨平台骨折的临床疗效.方法 选择我院2015年8月至2019年8月收治的82例复杂胫骨平台骨折患者作为研讨对象,根据不同的手术入路方法将患者分为两