实时数据仓库存取策略的研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:eva37
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术的不断发展,商业智能系统(BI)产生的信息数据在企业的日常运营中愈发重要。传统数据仓库的数据的加载周期固定并且较长,往往不能及时地反应企业相关信息(比如政府对行业的政策调整、市场对商品的需求变化)的瞬息万变,只能提供对现有的历史数据的查询分析功能,因此企业迫切需要实时、高效的数据处理工具捕获、分析实时数据,帮助企业能第一时间做出决策判断。实时数据仓库技术,作为传统数据仓库技术的一个扩展,能够迅速捕获数据的变化,并且完成实时分析功能高效的满足了企业的需求。数据的无延迟处理是实时数据仓库的关键技术之一。要在实时数据仓库系统中,实现实时数据高效、无时延的存取处理是一项具有挑战性的工作,因此研究实时数据仓库中实时数据存取策略对于实时数据仓库的发展有着重要的意义。本文对实时数据仓库处理技术、传统数据仓库、OLAP技术的研究现状进行了全面而深入的分析。设计了一个改进的实时数据仓库的体系结构,并且讨论本文提出的实时数据仓库存取处理技术的应用场景。然后针对实时数据存取技术的新特点,重点分析了实时数据存取技术的实现难点:当数据的查询操作和更新操作是同时进行,会导致在某一个时间点对于事实表中的某些记录发生查询与更新性能瓶颈(即查询冲突);当ETL在向数据仓库加载数据的时候,用户可能频繁执行查询操作,那么本文就要考虑要不要把新到来的数据纳入结果中(即查询精度问题)。针对上述这些问题,提出了基于动态镜像的数据存取技术,通过在独立于数据仓库的内存创建动态存储区域,同源的变化数据导入实时数据仓库前,以链表的方式暂存于动态存储区域中,在满足OLAP操作后载入实时数据仓库,有效的保证了查询结果的精度,且避免了查询竞争,大大提高了查询效率。
其他文献
汪小川遗著《历史小故事》,由生活·读书·新知三联书店贵阳联谊会编辑,列入《三联贵阳联谊丛书》,已于近日在贵阳与读者见面。我们有幸在该书付印前对书稿作了仔细通读
采用测量地径与高度的方法对毛竹春笋生长情况进行调查,总结毛竹春笋生长的自然规律。
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
什么时候党确立中国马克思主义的理论自信,革命与建设就能走向胜利$$   中国特色社会主义理论自信有着成功经验和伟大成就作坚实基础$$   坚持理论自信,就要以中国特色社
报纸
对马钢常用的10种铁矿粉的同化性、液相流动性、粘结相自身强度、SFCA生成特性、连晶固结强度等高温烧结特性进行了研究。在此基础上,根据铁矿粉高温特性互补原理,设计了五组
<正>凤啄香木, 一星星的火点迸飞。凰扇火星, 一缕缕的香烟上腾。杂志也是有生命的。《地理信息世界》作为一份专业刊物,曾是一颗默默无闻的种子,一直都埋藏在地理信息这个行
电视被称为一门"遗憾的艺术"。因为电视新闻稿是"为听、为看"而写。从某种角度讲,电视新闻报道的收视率很大程度上取决于电视新闻稿写作质量的好坏。本文主要探讨了提高电视
目的明确个体化护理对于乙型肝炎(乙肝)肝硬化失代偿患者用药依从性的改善效果。方法 60例乙肝肝硬化失代偿患者作为研究对象,通过随机数字表法分为常规组和干预组,每组30例
目的:通过对124例肠易激综合征患者进行焦虑、抑郁状况调查,统计焦虑抑郁状态的发病率,分析探讨肠易激综合征患者焦虑抑郁状态的相关影响因素,以期为中医诊疗提供新的思路和
习近平总书记在党的新闻舆论工作座谈会上强调,党的新闻舆论工作是党的一项重要工作,是治国理政、定国安邦的大事,要适应国内外形势发展,从党的工作全局出发把握定位,坚持党的领导
报纸