虚拟天文台环境下的海量数据存储与访问技术研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:yupucn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着观测设备和观测技术的发展,天文数据呈现爆炸式的增长,而计算机网络技术的快速发展又为这些海量天文数据的共享提供了有力的技术支持,因此,将天文学和计算机技术融合在一起的“虚拟天文台”便应运而生,使得人们突破时间和空间的限制获得丰富的天文数据资源成为可能。然而,在虚拟天文台环境下,如何对海量数据进行有效存储成为一个亟待解决的问题;同时,如何对海量数据进行快速有效的访问,也是关系到虚拟天文台服务能力的重要课题。本文以中国虚拟天文台为背景,研究海量天文数据的存储和访问技术。首先,对当前主要的存储技术进行综合分析和比较,结合虚拟天文台对海量数据的存储需求,设计了中国虚拟天文台的数据存储方案,并对该方案进行评价。然后,针对天文数据的存储特点,分析当前天文数据的访问现状,提出了海量天文数据的高效访问方案,对该方案进行详细论述并验证其可行性,在此基础上,提出了适应于该方案的海量天文数据分层模型。最后,在对海量天文数据的存储和高效访问研究的基础上,具体设计并实现了一套天文数据归档管理系统——FitHAS,该系统能够屏蔽不同FITS文件的差异,向用户提供统一的接口,并能对大量的FITS文件进行快速有效的访问和方便的管理。本文在理论上具有一定创新,研究成果已经在中国虚拟天文台的建设中得到应用。实际效果证明,本文提出的存储和高效访问方案以及在此基础上实现的FitHAS天文数据归档管理系统可以有效满足中国虚拟天文台对于海量数据存储和访问的需求,同时具有很强的可扩展性。
其他文献
工作流技术是实现企业业务流程管理自动化的一项重要的计算机技术。随着计算机网络技术的不断成熟和发展,企业的规模越来越庞大,企业物理位置的分散性和决策制定过程的分散性
随着电信运营商从传统基础网络运营商向现代综合信息服务提供商转变,运营商不再仅仅提供单一通信业务,业务类型,用户数和业务量大幅增长,与此同时,电信市场不断开放,市场竞争
基于内容的图像搜索是目前信息检索领域的研究热点,属于多学科交叉,涉及到计算机图形学、图像处理、数据挖掘、模式识别等多种技术。因为图像特征维数高且无序,所以基于内容
近年来,随着对计算生物学的高速发展,开发出的微阵列技术可以测量细胞中成千上万的基因。在这些基因中我们可以提取出许多数据,针对这些庞大的数据,我们可以从中得到许多有用的结
学位
随着计算机网络的不断发展以及计算机硬件价格的下降,将计算任务分布到多个物理主机上处理,以提高任务计算速度和降低任务运算成本已经成为一个趋势。这种通过通信线路将多台
随着移动数据业务的迅速增长和市场竞争环境的日益激烈,电信运营商迫切需要加快数据网管系统的建设,来提高维护管理水平和规划能力,保证移动数据业务向更深层次的发展。从发
OA (Office Automation:办公自动化)是企业信息化建设的重要组成部分。办公自动化系统的发展恰好与数据、信息和知识的演变同步,即以数据为主要处理内容的第一代办公自动化发展
煤气流分布状况直接影响高炉煤气热能和化学能的利用效率,关系到炉内温度分布、软熔带结构、炉墙热负荷、高炉热平衡状态以及高炉炉况的稳定顺行,高炉操作在很大程度上就是在于
在深入了解了人脸检测当前发展的动态,深入分析了各种人脸检测方法及人脸检测存在的问题的基础上,提出了本文的人脸检测方法。首先采用构建好的基于白平衡的自适应的肤色模型