数据布局相关论文
针对变电站自主定位导航过程可能出现的设备仪表故障问题，设计基于实时数据的变电站在线智能巡检系统。以C/S架构为支撑，分别连接机......
为掌握电网运行状态,挖掘量测指标信息,解决电能质量问题,国家电网以大数据计算中心为核心,建成了集中式架构的电能质量监测系统。......
近年来,随着气象信息化进程不断加速,气象行业内部需处理的气象数据与日俱增,从而产生了大量的数据存储问题,如何对气象数据进行合......
随着计算应用正变得日益数据密集化,现有的计算系统面临着巨大的挑战,数据密集型异构系统是现有技术条件下现实的解决方案。包括了......
随着信息时代数据量的急剧膨胀,传统存储系统如存储局域网(SAN)和网络附加存储(NAS)采用的均为纵向拓展的架构,在性能和扩展性上已......
廉价磁盘冗余阵列(RAID)作为一种提高存储系统可靠性和性能的技术，已经得到了广泛的应用，有关磁盘阵列结构和数据布局的研究也一直很......
磁盘阵列(RAID)作为一种提高存储子系统可靠性和性能的技术，已经得到了广泛的应用。特别是近些年来存储系统网络化、规模化等发展趋......
在外存模式图处理系统处理大规模图数据时,由于图应用访问的随机性和图数据的低局部性,导致此类图处理系统在访问图数据时产生大量......
互联网技术的飞速发展对计算机存储系统性能和数据的可用性提出了越来越高的要求。新的基于IP的网络存储系统逐渐成为业界关注的焦......
学位
天文学、高能物理学、生物信息学等现代科学应用领域通常包含成千上万个任务,并且需要处理大量的数据,因而需要大量的计算资源和存......
随着信息时代的逐步推进,科学工作流得到了广泛的应用。特别是在科研领域的应用更是广泛,如天文学,高性能物理学等。由于科学工作......
在当今大数据的背景下,天文学——一门以数据分析为基础的学科,其观测数据量也一样随之井喷。特别是由于世界范围内,观测设备的精......
随着人类社会数据爆炸性增长,分布式存储系统的规模也越来越大,节点数少则几千多则上万,磁盘或者节点出现故障的概率大大提高。因......
天文学是最早进入大数据时代的学科之一,随着望远镜观测数据量的不断增大,天文学数据存储也逐渐成为了新的问题。不同于传统的数据......
随着信息化的推进和计算机技术的发展,数据密集型应用不断的产生,大量甚至海量的数据被分析计算以获取具有某种价值的信息。构建数......
近年来伴随着“大数据”时代的到来,以及云计算、云存储技术的不断发展,面向数据密集型的应用愈来愈多的受到关注。数据密集型应用......
随着大数据(Big Data)时代的来临,个人、企业、政府以及科学研究无时无刻不在产生与使用数据,数据已经不单单是0和1的组合,更成了......
云计算为与日俱增的数据信息提供了丰富的存储、处理资源。如何设计行之有效的数据布局方案,以保证云数据中心资源优化和节能环保,......
伴随着图处理的快速发展,包括数据规模、数据类型,以及图应用在内的多方面因素,显著影响着访存特征。图处理的过程一般分为多次迭......
随着科学技术的飞速发展,固态盘(Solid State Drive,SSD)在大规模存储系统中得到了广泛的应用。然而SSD的寿命有限,擦除次数达到一......
随着海量数据的不断增长,如何高效安全地对数据进行存储,更深层次的挖掘和利用大数据,成为当前急需解决的重要问题。混合存储是目......
科学工作流这类数据密集型应用部署在混合云中,可以充分利用公有云资源的无限可伸缩性和广域分布性,扩展私有数据中心有限的资源提......
短短几年，以uber、滴滴打车等公司为代表的共享经济浪潮席卷全球。在A股，共享经济形态也风生水起，成为企业转型的方向，千方科技（002373.......
2015中国大数据技术大会(BDTC 2015)近日在京举行,在“交通与旅游大数据论坛”,神州专车首席架构师李思分享了神州专车的大数据布......
提出并设计实现了一个基于Linux系统平台的容双故障的通用软磁盘阵列平台Deraid.它容许阵列中任意两个磁盘同时出错而保证数据不丢......
在分布式并行机上,数据布局的质量极大的影响着应用程序的执行性能.以往的研究一般将自动数据布局优化问题近似分解为数据对准优化......
如何有效地对数据进行布局是大规模网络存储系统面临的重大挑战,需要公平、冗余、自适应、高可靠以及高可用的数据布局策略.根据大......
分析了大规模视频存储服务器的性能指标要求、体系结构、数据布局和准入控制等问题,提出了基于并行磁盘阵列上的、可满足用户多QoS......
对于SLP(superword level parallel)算法不能高效处理并行代码占有率较小的大型应用程序的问题,提出并评估了一种新型的基于改进的......
随着网络的快速发展，网络中的数据不断地快速增长，为了适应动态增长的工作负载，采用分布式的键值存储，将数据自动地分布存储到各个服务......
首先构建了多云混合云环境,通过分析不同服务提供商计费策略的差异性和网络连接情况,建立相应的中间数据布局成本模型和传输时间模......
综合考虑数据集间的依赖关系以及数据中心的存储容量,引入一种名为"虚拟数据代理"的新实体,通过建立虚拟数据代理云模型,将数据布......
数据布局策略作为数据管理的重要方面，对研究多数据中心环境下的数据布局有着重要意义。针对多数据中心的数据检索、更新和全局负载......
数据的完整性和可靠性是保证其能被高效访问的关键,尤其是在云存储环境中,数据副本策略是影响系统性能和保障数据可用性的核心。从......
针对数字信号处理器的片上存取结构特点，提出了一个优化视频解码运动补偿过程数据布局的方案.在片上便签式存储器(SPM)中设置一......
高效、可伸缩的数据管理在大规模分布存储系统中日益重要,关键是需要一种能够自动适应存储节点增加或减少的灵活、均衡和可伸缩的......
异构架构迅速发展，依靠编译器来挖掘应用程序的数据局部性、充分发挥加速设备片上cache的硬件优势，是十分重要的．然而，传统的重用距离......
对云存储系统环境中的数据布局策略进行了论述与总结。首先讨论了云存储技术的起源以及云存储系统不同于传统集中式存储方法和现有......
廉价磁盘冗余阵列(RAID)作为一种提高存储系统可靠性和性能的技术,已经得到了广泛的应用,有关磁盘阵列结构和数据布局的研究也一直......
如何结合公有云和私有云各自的优势,对包含隐私数据的科学工作流数据进行合理布局,优化大规模数据的传输时延,是混合云环境下科学......
提出一类新的双容错编码——V阵列码，冗余数据均匀分布在每个磁盘中，能容许任意两个磁盘同时故障。并证明基于V码阵列布局是最优双容......
从一个新的途径讨论容许两个盘故障的磁盘阵列数据布局:把由数据单元和通过'异或'运算得到的校验单元组成的校验组用一个......
在EVENODD码的基础上,提出一种新的基于EEOD码的RAID数据布局,只需要3个额外的磁盘保存校验信息,能容许任意3个磁盘同时故障,并给......
动态内存分配在现代程序中被广泛使用.通用的内存分配器通常关注于降低运行时开销和内存利用率,而在发掘所分配对象之间的特性方面......
摘要：科学工作流应用是一种复杂且数据密集型的应用，常应用于结构生物学、高能物理学和神经学等涉及分布式数据源的学科。数据分散存......
数据布局算法是分布式存储系统的基础性算法,也是提高数据处理效率的关键。针对节点负载和通信延迟等存储节点状态,提出了一种衡量......
