大规模数据处理相关论文
在当今大数据时代,大规模数据处理主要是基于分布式的并行处理计算,调度在提高大数据并行处理框架的性能方面起着重要作用。Spark作......
随着智能时代对大规模数据处理的要求越来越高,摩尔定律下的处理器集成器件数量越发接近极限,当下急需通过架构的变化以应对大数据的......
在海量数据时代,如何有效处理大规模数据是目前科学和工程领域亟待解决的问题。非负矩阵分解(Nonnegative Matrix Factorization,N......
近年来,大规模图数据处理的需求日益强烈,一些图计算模型被提出,例如Pregel[1]模型,GAS[2,3,26]模型。它们可以分为离线和流式两类......
近期笔者参加了国家统计局举办的“基于云计算技术的统计大规模数据处理高级信息技术”研修班,借此机会较系统、全面地了解了云计......
目的 凸能量泛函正则化模型(EFRM)的综述论文在国内外还少有报道,为使即将进入该领域的研究者全面了解发展现状,结合图像恢复,对该......
当前的网络数据存储系统在处理大规模数据时需要较长时间,增加了网络数据存储周期,存储性能较差。因此设计并实现一种大规模网络数......
交叉证认是实现多波段数据融合的关键技术,天文数据的海量性使这一问题必须要依靠计算机技术加以解决。按照PCAM并行设计模型设计......
在核应急响应期间,利用可视化手段直观展示大规模核素扩散数据的空间分布,有助于应急指挥人员快速有效地进行科学决策与指挥。本文基......
针对面向大规模历史数据的高并发数据流处理需求,为改进MapReduce的实时处理能力,提出了一种内存HashB树、外存SSTable文件的key/valu......
本文对国内外知名大学和研究机构开设的云计算/大规模数据处理课程进行比较研究,从授课内容、授课形式等方面深入分析了Google 101......
随着三维测量扫描设备的精度不断提升,通过扫描设备获得的原始点云数据通常都是数十万甚至是上百万,海量的点云数据量给后续处理带......
对铁路行业的计算资源、数据处理进行了特征分析.探讨了云计算模型中的虚拟化技术在铁路计算资源整合及MapReduce编程模型在大规模......
在当今大数据时代,计算机处理数据的要求也随之增加。当待处理数据的容量大于计算机内存容量之时,常常需要内存与外存进行数据之间......
以实时传感数据和历史感知数据为基础的各类计算需求逐渐成为当前物联网应用建设中的关键,如何实现基于高速数据流和大规模历史数......
随着网络信息处理市场的快速扩张和信息处理数据量的急剧增长,针对大规模和超大规模数据的分布式计算处理技术成为倍受关注的工程......
随着信息技术的发展,互联网作为一种服务越来越深远地影响人类的生活。在信息爆炸的背景下,海量信息处理成为计算机科学的新挑战。......
近年来,随着信息时代的飞速发展,海量的数据被产生和存储。特别是在大数据时代的背景下,人们对于海量数据的挖掘和运用正在成为重......
无线传感网络近年来的持续发展为桥梁健康监控提供了可靠和高效的平台。采用最新的CC2530解决方案使得无线传感网络能以更小的体积......
MapReduce框架和其开源实现Hadoop自从问世以来,受到了学术界和工业界的广泛关注和使用。但是开发一个高效的MapReduce应用通常需......
随着互联网时代发展到物联网时代,传统的网络变为了“物”与“物”之间互联的网络。这样改变不只是带来了网络规模、数据规模方面......
为了在大规模历史感知数据基础上实现针对高速传感数据流的实时计算,提出一种面向大规模历史数据的数据流处理方法RTMR,通过中间结......
针对大规模能源数据系统的存储与快速检索需求,提出了一种基于HDFS/Hadoop开源平台的云存储架构及多级索引目录体系,以及此架构下......