异构集群相关论文
大数据是网络信息时代的客观存在,其产生的意义在于对数据进行专业存储和处理,并从中挖掘和提取所需要的知识和信息。Hadoop作为数......
量子计算是一种新的计算模拟,是量子理论与计算科学相交叉的学科,是当下计算技术最新的发展趋势。由于其利用叠加性、纠缠性和可逆......
Spark大数据处理框架广泛应用于大数据领域,默认采用基于同构集群的调度策略,考虑数据中心的异构服务器集群更符合实际应用。数据......
在大规模分布式智能视频监控中,终端摄像头连续不断地向远程服务器发送所采集的视频数据,不仅需要较大的网络带宽和存储空间,而且......
云计算是一种新兴的并行计算技术,在学术界和商业界都取得了巨大的发展,已有大量的云计算系统被投入使用。现有的Hadoop平台在异构......
随着高性能计算产业的蓬勃发展，越来越多的研究机构和商业公司向这一领域投入大量的人力和物力资源。而集群作为高性能计算的一种重......
学位
因为MapReduce对于处理大规模数据有着很好的可扩展性，所以MapRe-duce成为了云计算中非常流行的一个编程模型。但是，MapReduce在异构......
云计算是并行计算、分布式计算和网格计算的发展,使并行技术走进了人们的生活。云计算、个人高性能计算机(PHPC)等技术的深入发展,......
电子商务、金融以及社交网络等领域的迅猛发展,带来了数据规模前所未有的快速增长。大规模数据的存储和处理成为互联网行业的研究......
随着并行计算技术的发展，以众核加速器作为协处理器的异构集群逐渐成为并行计算机的发展方向，在其基础上混合并行计算模型成为主要并......
云计算在网页搜索、数据挖掘等大规模数据处理方面正变得越来越重要,Hadoop作为一个开源的云计算平台也得到了广泛的应用。作业调......
随着信息科学技术的快速发展,互联网与社会各个方面的结合越来越紧密。互联网所产生的信息数据也以指数级的速度飞速增长。面对海......
集群系统由于其良好的扩展性和可用性,逐渐成为当前并行计算的主要平台。随着实时应用范围的扩大,对计算机处理能力的要求不断提高......
随着基于Hadoop平台的大数据技术不断发展和实践的深入,Hadoop YARN(Yet Anouther Resource Negotiator)资源调度策略在异构集群中......
随着计算机应用的不断发展,实时系统的应用越来越广泛,并行计算也成为主流,同时,并行任务分配与调度算法成为并行计算系统的核心,......
云计算是以互联网为基础的新一代技术的总称,是并行计算、分布式计算和网格计算的综合发展。云计算技术将计算资源以服务的形式提......
Hadoop中数据及其副本如何更好的存放和管理是HDFS中亟待解决的问题。在实际中,Hadoop同构下默认的数据放置策略对异构环境下的设......
在云计算快速发展的背景下,大数据技术与云平台的结合也日趋紧密。大多云服务系统的资源都具有动态性、异构性、不确定性,这些特性......
Spark是一个基于内存计算的可扩展分布式计算框架。Spark将作业分解为较小的任务,并将任务调度至集群中各个节点上并行运算以提升......
学位
近年来,深度学习被广泛应用于图像处理、自然语言处理等各种领域,其成功源于大数据、算法模型和计算能力的共同发展。为了提高深度......
传统CPU多核处理器和CPU集群有时无法满足应用程序对大规模和超大规模计算的需求,图形处理器GPU正在以其特有的高性能浮点计算、并......
Mapreduce计算框架在Hadoop平台上现有的资源管理模式存在着诸多问题,在hadoop平台被各行业广泛应用和不断改进的过程中这些问题逐......
随着大数据时代的到来,越来越多的人意识到数据的重要性,随之涌现出许多围绕数据进行分析和处理再应用的企业和研究机构,传统的数......
摘 要：异构集群具有强大的兼容性以及高可靠性，在为高校信息化系统设计定制化的异构集群系统架构的基础上进行高校信息化系统的集约......
传统经典作业度算法在集群应用中实现简单、执行效率高,但在异构集群环境下由于缺乏在线节点运行状态动态反馈能力和负载均衡能力,......
当前Hadoop的实现主要针对同构集群,假设任务处理的数据基本是本地的.然而,实际应用中集群多为异构.这暴露出现有的数据分配策略对......
大部分存储集群构建时可能包含有遗留设备及新购置设备,这些设备在存储性能方面存在较大差异.采用HDFS默认的机架感知存储策略时,......
首先根据排队论理论给出了一个理想的负载均衡模型.针对该模型的系统开销问题,提出了一种基于节点分组的异构集群负载均衡算法.实......
为提高异构集群的动态负载均衡性,引入物联网技术中的传感技术构建异构集群信道传输模型,然后采用动态加权方法配置输出信道,并完......
在OLTP应用中数据库集群是一种有效的并行处理方案，由于以前对数据库集群特别是异构情况下的性能评价不够完善，本文主要研究数据库异......
针对基于软交换的集群媒体服务器的系统特征,本文提出了一种LRV(Limited Resource Vector)负载均衡算法,该算法考虑了系统中资源的......
随着高性能计算机的发展,一种基于CPU-GPU的异构集群逐渐被人们所关注。相比于传统集群,它更经济环保,且拥有更高的运算速度。但异......
在集群系统中,为有安全需求的实时应用提供安全保障得到了广泛关注,但将实时应用的安全需求与调度算法相结合的研究并不多.文中提......
容错调度是调度问题中一个重要的研究内容，是提高系统可靠性的有效手段．目前已有很多集群系统中实时任务的容错调度算法，但是这些算法......
异构集群多层次异构存储的特点，决定了在其上进行计算时，数据需要进行更多维度的划分．现有集群程序设计语言缺乏对多维数组传输和转置......
异构Map-Reduce环境中资源分配策略直接影响其响应时间,如何利用有效的策略将计算任务分配到计算资源是亟待解决的问题。利用和声......
Hadoop集群环境中，由于增加删除节点、删除文件等操作，都有可能造成数据的不均衡。数据的负载均衡对集群性能有着重要的影响。首先分......
计算能效比的异构性使得集群系统在进行任务分配时,权衡服务质量与能耗优化变得更复杂.为此,针对异构集群的任务分配问题,建立能耗......
云资源的合理分配以及对作业的有效调度,能够大幅提升云系统性能.在归纳Hadoop的现有作业调度算法的基础上,提出一个适用于异构集......
针对官方的Hadoop软件中提供的节点心跳超时容错机制对短作业并不合理,而且忽略了异构集群中各节点超期时间设置的公平性的问题,提......
Hadoop是大数据处理的基础框架,负载均衡策略的优劣对Hadoop集群的处理性能有着非常重要影响。现有调度算法的一个基本假设是每个......
随着各行业数据的不断积累,数据处理难度也越来越大。因此需要借助分布式系统进行数据处理。传统分布式系统提供了基础解决方案,但......
在研究基于软交换的集群媒体服务器的系统特征的基础上,提出了1种LRV(limited resource vector)负载均衡算法并提供了算法的软件实......
传统的非结构化大数据检测方法只分析数据的统计特征、缺少对其中模糊闭频繁项集特征的识别,易出现监测结果不理想的问题。为了提......
异构集群由于良好的扩展性和可用性,逐渐成为当前并行计算的热点。在具有实时性要求的异构集群中,调度是提高系统性能的关键所在。......
数据中心的出现,使得大数据分析任务被分散到不同的计算节点。随着GPU计算的广泛应用,如何为不同的计算框架合理分配异构计算资源......
该报告针对Godson-D的芯片特征和亿级并发负载的特征,研究了层次化Map Reduce编程模型,对上层应用呈现简洁的编程接口,并利用Open ......
与传统集群相比,异构集群具有较高的性价比。但相比迅速发展的硬件技术,当前软件技术仍然落后,不能适应不断更新的异构硬件和超大......
