应用驱动的基于流式框架的实时数据分区算法

来源 :计算机应用研究 | 被引量 : 0次 | 上传用户:grindswods
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据分区技术是改善基于shared-nothing架构的大型应用性能的重要手段。当前的数据分区技术无法高效处理应用负载所蕴涵的动态、大规模分区信息,无法即时生成分区策略。为了解决传统数据库分区技术面临的问题,实现分区的实时处理,提出了与流式框架相结合的实时数据分区算法,通过构建关联矩阵映射分区信息,并基于代价模型实现数据分区方案的即时生成,采用流式框架的水平扩展机制实现了算法的高扩展性和高吞吐量适应性。实验结果表明,与现有分区方法相比,算法有较好的分区效果和较低的时间复杂度。该算法是大数据环境下针对大规模
其他文献
<正>近期玉米价格居高不下,为了降低饲料成本同时提高性价比,特选用两种不同饲料配方进行饲喂试验,从而确定不同饲料配方对生长猪生产性能的影响。1试验动物和试验设计试验采
<正>民以食为天,牧以料为先。饲料工业作为支撑现代畜牧水产养殖业发展的基础产业,事关城乡居民日常动物性食品供应,事关人民群众身体健康和生活品质提升,事关社会公众食品安
路径分析是网络分析最基本的问题,其核心是对最短路径的求解.最短路径算法的优化直接关系到网络分析技术的提高,其求解算法的优劣决定相关软件的性能,通过对Floyd算法基本思
<正>在2013年底至2014年初举行的国内主流重卡企业商务年会上,"体验式营销"成为了热频词汇,不少企业都表示,这种让客户亲身体验产品性能的营销方式将成为其2014年销售工作中
<正>引子:2013年5月20日,富士达公司联合地方协会、单车俱乐部共同组织5.20"回娘家"骑行活动,车友骑行富士达出品的邦德自行车,从沈阳出发前往位于天津的富士达总部,开启一段
期刊
分析适用于110 kV辐射式网络的220 kV变压器及110 kV线路保护整定计算原则在110 kV环网运行中应用存在的问题,提出220 kV变电站110 kV环网运行的继电保护整定计算原则。通过
齐口裂腹鱼(Schizothorax prenanti)是我国重要的冷水鱼类之一,为我国长江上游名贵经济鱼类。本研究在免疫组和对照组齐口裂腹鱼胸鳍基部分别注射0.2 m L浓度为1.0×108CFU/m
新形势下,我国房地产交易中出现的风险不仅会损害到购房人的利益,而且对房地产市场的稳定发展也带来了不小的影响。防范房地产交易中存在的风险,要规避房地产交易合同风险;构
针对某类型太阳能游览船舶开发的火灾报警系统,根据实际应用情况,分析采用总线技术在数据采集、传输信号中存在的各种信号干扰,从硬件和软件方面讨论了火灾报警系统抗干扰的
当前在城市开放空间中如何更有效地构建场所精神,形成可阅读、可感知的场所空间,是设计师面临的挑战。在地域文化的传承与表达中,经常会出现文化信息传达的感知分离现象。文