流程工业分布式实时数据库智能索引系统的设计与开发

被引量 : 0次 | 上传用户:echo19
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
实时数据库系统是大型流程工业企业生产信息化的基础数据平台。随着流程工业的迅速发展,传统实时数据库索引技术由于数据规模相对固定、性能难以扩展、灵活性不足,在系统容量、可靠性、可扩展性等方面已无法满足实际应用需求。研究可支持海量数据存储、分布式冗余备份、规模动态调整的智能索引技术,对实时数据库的分布式化具有重要的理论意义和显著的实际应用价值。本文针对流程工业数据特点与组织方式,提出一种分布式实时数据库智能索引技术,将现有的流程工业单体实时数据库索引技术与NoSQL海量数据存储索引技术相结合,实现了工业测点数据在分布式环境中的自索引与自调整功能,使用户无须关心测点数据具体的存储位置、各测点的负载等情况,并有效解决了网络带宽的性能瓶颈及测点存储位置的动态维护等问题,提高了系统的易用性、安全性和可扩展性。本文基于已有的实时数据库高性能存储索引技术,创造性地提出一种适用于流程工业测点类数据的分布式智能索引机制,主要由索引存储查询、负载均衡、多重副本三项技术构成。索引存储查询技术通过建立一个虚拟化的Token域,根据Hash算法将每个测点(组)映射到域中的某个Token,然后根据集群负载情况,为各服务器动态分配所管辖的Token范围,并设计高效的数据结构,保证集群状态发生变化后,可支持查询分散在各个服务器上的测点历史数据,并支持测点订阅。负载均衡技术采用双回路反馈机制,在各服务器负载有失衡的趋势时,通过动态调整测点数据写入流向,预先调整各服务器的负载,避免了大量数据迁移操作。多重副本技术实现了流程工业测点数据的并发查询及智能备份功能,在服务器宕机时可以不中断服务,在数据丢失时可以恢复,并且可以为数据的并发查询提供支持,保证了其实时性和可靠性要求。该设计作为分布式数据读写机制的核心,为满足整个系统的功能性和非功能性指标提供了保证。本文基于以上机制实现了分布式智能索引原型系统,并使用4台通用服务器搭建测试平台,对存储、查询、负载均衡功能、10万测点推送压力下的性能进行了全面的测试验证。测试结果表明,原型系统的各项功能与整体性能符合设计要求和应用需求。
其他文献
号线资源管理系统是电信运营商管理接入网码号和线路资源的系统。随着电信技术的发展和电信运营商融合,电信运营商从非全业务向全业务经营模式转变,电信运营商逐渐建立支持全业
应对新一轮的发展契机,国家重提城镇化战略。但快速的城镇化不仅带来巨大的人口和财富集聚,也在空间上促使雨洪径流集聚,从而造成了严重威胁城市安全的雨洪灾害。在发展新型
北京双年展是中国参照国际艺术双年展惯例举办的重大国际性美术活动,试图为中国的艺术发展提供一个与世界横向交流的平台。本文以北京双年展为研究对象,对其产生、发展现状及
改革开放初期,我国为弥补经济发展中资本投入的不足,陆续出台了一系列以吸引外资为主的税收激励政策。实践证明,这些政策有效地吸引了大量外商投资,对我国经济快速增长的贡献
针对企业应用集成(EAI)中数据集成模式的两大局限,提出了一种新型的基于数据集成的EAI解决方案.文章首先给出了该数据集成方案的体系结构,然后对数据集成过程中的若干关键技
目的观察米索前列醇用于绝经后妇女取环术的效果。方法将医院收治的绝经后取环妇女100例随机分为观察组和对照组各50例,对照组行常规取环手术,观察组手术操作当天将米索前列
笔者在文中揭示出隐藏在影像艺术形式语言背后的某种类似宗教的发展逻辑——影像艺术家借用最新的技艺形式进行自己的创作,其实质是影像背后的工业文明确立了以生产消费为主
随着社会经济的发展,高速公路网中的交通量迅速增加。为了满足交通流量增加的需求,高速公路网络不断完善,路网中的环路不断增加。路网的复杂化以及路网中交通流量的增加,对高
随着我国经济的快速发展和城市化进程的加快,大量农村剩余劳动力涌入城市,其中以年轻人居多。这些进城务工的年轻夫妻由于受户籍制度、教育制度、经济水平及工作强度等因素的
毛泽东平等思想是毛泽东思想的重要组成部分。毛泽东一生都致力于为中国建立一个自由平等的社会而不断探索和实践,给我们留下了丰富的思想遗产。认真总结研究这份珍贵的思想