【摘 要】
:
图作为一种较为复杂的数据结构,能表达更加多样化且更复杂的信息。大量现实生活中的应用场景都能抽象为图数据结构,比如飞机的运行航线和站点间的关系,参考文献的多级引用,网
论文部分内容阅读
图作为一种较为复杂的数据结构,能表达更加多样化且更复杂的信息。大量现实生活中的应用场景都能抽象为图数据结构,比如飞机的运行航线和站点间的关系,参考文献的多级引用,网页间链接关系等,在这些图数据的基础上,可进行分析获取潜藏信息。伴随大数据的普及,图规模的增长极为迅速,传统的单计算机图处理系统由于存储和计算能力的原因,难于高效地处理大规模图。现有的分布式图处理系统在通信方面存在通信开销大延迟高的缺陷,从而影响了整体性能。因此围绕降低通信开销这个目标设计一个高效的分布式图处理系统是行之有效的方法。分布式大规模图处理系统(DistCPathGraph)是基于簇的图数据处理框架,在单计算机图处理系统PathGraph的基础上,主要围绕降低通信开销和提高收敛速度在三个方面进行了独特的设计。以簇为中心的划分方案,在满足传统划分算法对重复因子比例和负载均衡的要求上,适配以路径为中心的计算模型,尽量确保了路径的完整性,以簇为单元对图进行规模缩减和划分,降低划分算法的时间和空间开销。针对更新过程中顶点计算顺序的更新调度方法,根据顶点间的依赖关系,调整计算过程中的顶点更新顺序,解决因等待非本地消息的到来而造成更新过程阻塞的问题,提升整体计算性能。打包发送的偏同步通信策略,降低了整体通信开销,简化了数据一致性控制的过程。整个系统围绕图数据划分,迭代计算过程中的更新顺序调度和偏同步通信策略进行设计,解决了传统分布式图处理系统通信开销大,收敛速度慢的问题。DistPathGraph在划分方案和迭代计算上具有较好的性能,通过一系列对比实验可知,一方面,DistPathGraph的划分方法在重复因子比例上要优于随机hash和以路径为中心的划分方法。另一方面,DistPathGraph的整体性能要胜过知名分布式图处理系统GraphLab,在不同的运行条件下,DistPathGraph比GraphLab性能要高出30%到600%左右。
其他文献
在全球变暖的背景下,降水事件普遍呈现极端化。赣江上游是江西省水土流失最为严重的地方之一,极端降水是影响该地区的水沙变化的一个重要因素。河流水沙关系是自然因素和人类
黑皮病是梨在贮藏中后期发生的一种严重的生理性病害,大大降低了果实的商品价值。本研究以杨山酥梨(Pyrus bretscneideri Rehdcv,Danshansuli)为实验材料,选用天然抗氧化剂白藜
随着全国城市建设的快速发展,交通量不断增加,城市重要节点地区的桥梁改造工程不断增多。特别是我国西南地区一些城市,桥梁高度大,现场场地小,项目受场地等环境影响,常规建设方法无法实施。对于此类受地理环境、工期限制等诸多因素影响的高桥墩、大跨径桥梁架设工程,采用超高大跨龙门架的方案,相对于使用其他类型的吊装方式,可有效节约成本,缩短工期,并可有效减少不良环境对施工的影响。目前,虽然国内龙门架的使用越来越
随着社会对交通安全关注度的提高,高速公路雨天交通事故多发已逐渐引人关注。高速公路雨天交通事故多发主要是由于降雨使公路能见度降低,驾驶员的视线障碍增大;同时大量雨水造成路面积水或滞水,路表形成水膜,使得车辆与路面间的附着能力降低,产生滑水现象,造成交通事故。通过调查发现,高速公路雨天交通事故通常发生在合成坡度小于0.5%的路段,尤其是平曲线外侧超高过渡零坡断面附近,并且交通事故数随着车道数的增加呈现
化学农药的应用导致了环境问题和社会问题。生物防治是植物真菌病害防治中的一项有效手段,它因为具有对生态环境的有效保护作用和防效潜力,从而得到了国内外人士的认可。近年
具有光-电功能的配聚物在光电材料领域有着重要作用。本文出发点是设计合成具有光电转换性能的配聚物并进行晶体结构和性质表征。基于结构数据,探究结构与光电性能的相关性。
大型自动化立体仓库是目前物流配送中心的关键组成部分,它具有货物存取立体化、运输分拣无人化、货位分配智能化、仓库管理信息化等诸多优势,因此得到越来越多生产制造企业的重视。自动化立体仓库合理高效的规划与运行,不但可以提高仓储效率、增加仓储能力,而且可以缩短仓储周期、减少占地面积、加快企业资金周转,对于提高企业的核心竞争力具有重要意义。本文提出将数字孪生技术应用于立体仓库的设计规划与调试优化过程中,利用
随着经济的发展和我国城镇化速度的不断加快,涌入城镇的人口一直在不断增加,在为城市注入活力的同时,也给城市的交通治理带来了新的挑战。可以看到,为了带给市民们更好的出行体验,提高城市整体的服务水平,越来越多的城市选择了建设轨道交通来缓解城市拥堵问题。有建设就要有管理,城市轨道交通的管理最突出的方向就在于乘客,而管理乘客时最引人注目的突破点就是客流量,城市轨道交通服务水平的提高,离不开对于乘客流量变化的
红外成像光谱仪可以在获得被测目标的空间分布信息的同时也得到其光谱信息,它具有获取信息和识别特征的独特能力,这使得它在许多领域都能得以广泛的应用。本论文采用jir5001
目的近年来,结肠癌在世界范围内的发病率逐渐增加,是最常见的消化道肿瘤之一,仍缺乏有效治疗手段,并且复发率较高。为了探索结肠癌有关的新的生物标记物和治疗靶点,研究结肠