基于内存计算技术的企业海量财务数据实时分析

被引量 : 0次 | 上传用户:spls108
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
存储在企业内部计算机系统之中的日益增长的财务数据暗藏着诸多有价值的信息。在不断变化的数据分析这一需求下,当这些待分析的数据的量大到一定程度之后,如何实施数据分析操作并实时获得结果正日益成为一个挑战。若使用传统方法,分析操作被发起之后,往往需要等待一段不短的时间,从几十分钟到几天不等,待系统处理结束之后才得到结果。这样实时性需求无法得到满足。为了缩短处理时间,有些系统采取预生成预先定义维度的物化的中间汇总结果这一技术,这样只能支持预先定义维度的相关信息的快速获取,无法满足灵活多变地任选维度进行数据分析的需求。内存计算技术是目前比较热门的技术话题。它采用列方式将数据存储在磁盘中,并且将数据按列压缩。运行时数据全部加载到计算机主存中。在数据操作过程中,一旦数据被需要时立即从主存加载到中央处理器缓存中被处理,相对于传统方法中数据被需要时,先从磁盘加载到主存,然后再从主存加载到中央处理器缓存,大大减少了中央处理器因等待数据而空闲的时间。同时它充分利用计算机中央处理器的多内核,并行处理数据操作。这样大大缩短一次数据分析操作的所需时间。除了从磁盘到中央处理器缓存的数据加载过程这一影响性能的瓶颈之外,另一个瓶颈是:在当前流行的三层企业系统架构体系下,数据总是需要在数据层和逻辑层之间双向传递多次,当数据量达到海量时,这对性能的消耗相当可观。内存计算技术提供在数据层进行内存计算的能力,逻辑层和数据层之间的界限被去除,大大减少大数据传递所带来的性能损耗。本文在分析内存计算技术及其实现框架之后,提出了一个两层架构的企业海量财务数据实时分析系统。以两层架构中的数据层为重点,首先详细阐述系统要分析的数据对象,接着明确系统的设计原则,确定系统功能与界限,提出系统设计方案,然后详细讨论系统实现的主要部分:数据层模型视图,最后通过比较测试证明内存计算技术在企业海量财务数据实时分析领域的价值。
其他文献
近年来交通运输企业规模日益壮大,经营范围不断扩张,营运资金所占比重越来越大,营运资金管理的效率成为衡量企业经营好坏的重要标准。建立营运资金管理评价模型,可从整体上揭示交
本选题关注时下热门话题新媒体与移动互联网,希望对此有所研究,弄清发展规律和需要遵循的自然匹配原则,不仅仅只是考虑传统媒体应该如何应对新媒体的冲击。现在学术界和公司提出
作为资本市场效率的判断标准,股价同步性相关研究一直为国内外学者重点关注,但对于低股价同步性是代表了公司层面信息融入还是噪声干扰的争论却一直相持不下。经过近30年的快
迁移是教育心理学上的一个专用名词,是指一种认知(学习)对另一种认知(学习)的影响。具体而言,是指在某一种学科,场合或情境中获得的认知对在另一种学科、场合或情境中获得的
对泰国优质甜酒曲中4株优势真菌(霉菌菌株编号为R1、R2,酵母菌株编号为L1、L2)进行了分离、纯化培养,旨在为开发更有价值的甜酒菌株提供实验依据。鉴定结果表明霉菌菌株R1为
当前,中职校学前教育专业的普通话教学存在诸多问题,其教学效果很难适应学前教育专业的需要,诸如学生学习动机不明确、学习效率不高、交流互动不够、用语氛围不浓以致普通话课堂
随着当今世界经济全球化和信息时代的推进,以及世界各国文化交流的日趋频繁,文学作品的翻译在全球经济文化交流中起着越来越重要的作用。文学翻译是翻译的一种重要形式,它是依据
大功率半导体激光器是以半导体材料作为激光工作物质的激光器,具有体积小、效率高、结构简单、价格便宜的优点,因而得到了广泛的发展。由于大功率半导体激光器有着很高的输出激
高职教育的核心是课程,而高职体育就是其中一门。高职院校的体育课程,不仅要实现“健康第一”的课程理念、促进学生全面发展、培养学生终身体育意,更应该注重体育与学生未来职业
本论文从质量管理相关理论出发,介绍了质量管理的发展进程、建筑工程质量的形成过程及影响因素、质量管理体系与质量控制体系的概念及在建筑产品质量管理中的重要作用。结合我