对象存储文件系统的I/O跟踪软件设计与数据分析

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:wzjjp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于trace(跟踪信息)的分析一直被用来引导和促进软硬件的设计。对象存储文件系统作为下一代互联网信息存储的核心技术,结合了块存储和文件存储的优势,在数据共享、安全性及智能化方面具有优势,具有多层次、可扩展、高性能、高安全性的特点,使它成为高性能计算、生命科学、能源等行业的首选。目前的trace基于原有文件系统且不包含对象信息,故不适合用来分析对象存储文件系统。设计与开发对象存储文件系统I/O trace,分析trace数据行为规律,对于对象存储文件系统的设计具有理论指导意义。对象存储文件系统I/O trace系统由三模块组成。它们分别运行在lustre对象存储系统三方子系统上。由于对象作为基本的存储单元,包含了许多有用的属性信息,这三个模块均把对象看作是一个捕获单元。该系统采用缓冲区缓存由lustre对象存储文件系统响应及完成用户数据请求过程中的历史信息,由一个输出模块把这些信息导出到指定文件里,采用数据库保存经过滤及重构trace后的有用信息,以方便对数据进行统计分析。针对两种典型应用环境,文件服务和Web服务,对lustre对象存储文件系统的参数配置进行了分析,并测试了不同节点数和不同lustre条块大小配置下的系统性能;通过对比分析得出系统最优化配置,为提高对象存储文件系统性能提供了参考。
其他文献
面对当前国内企业集团的下属企业众多,组织层次复杂,地域分布广泛,管理链条过长的现状,财务预算管理软件从设计上就要满足时间与空间一体化、财务与业务协同一体化的要求。为适应
近年来,国内外微博应用普及推广极快,使得微博成为一个可以让网民自主且相对自由发言评论的虚拟场所。并且,关于微博带来的独特的社交效应、博主行为模式、基于兴趣的推荐等问题
数据的发布者往往拥有数据但不具备数据挖掘的能力。数据的分析者往往拥有数据挖掘的技术但苦于缺少数据。一些数据发布者担心发布没有采取任何保护措施的数据可能会导致隐私
随着实时数据库研究的逐步兴起,现实生活中对它的应用也越来越广泛,诸如电子商务、空中交通管制、程控电话交换、电力调度等应用都需要它的支持。然而,在实时数据库中还存在着许
自动化产业近年迅速发展,在自动化应用领域,AOI(Automatic Optic Inspection)即自动光学检测设备也作为一种新型技术发展迅速。自动光学检测设备能在自动化生产上比较快速的
目标跟踪算法是被科研人员广泛关注的研究课题,其在工程应用中也具有重要的实用价值。目标跟踪算法在近十几年中已经取得了很大的发展,已经提出的跟踪算法概括起来可以分为两类
本文结合某高校教务管理的实际情况,给出了一种新的高校教务管理系统的整体模型设计,提出了数据挖掘和J2EE架构技术相结合的设计思路。 传统教务管理系统采用ASP等服务器端
计算网格被用来解决广域网中分布的资源共享、互联和互操作问题。随着数据密集型应用的飞速发展,数据呈爆炸式增长,数据网格技术应运而生,而且正成为网格技术的另外一个研究
软件复用与构件库技术一直是计算机软件工程领域的研究热点。构件表示与检索技术,是构件库技术的核心技术,也是软件复用的重点研究领域,国内外提出过很多的表示方法与检索形
图形用户界面(Graphical User Interface,GUI)软件测试烦琐,自动化测试势在必行。当前GUI软件自动测试工具存在回归测试复杂、覆盖率低、测试脚本复杂等问题,测试质量没有保