C4S2-207:电子商务环境下基于Bigtable的海量数据存储系统设计及分析

来源 :第二届中国云计算与SaaS大会 | 被引量 : 0次 | 上传用户:gomo08
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文在分析互联网海量存储各种NOSQL数据库、电子商务环境下数据特点及现有数据模型的基础上,根据Bigtable的理论,提出了海量存储系统(HSS)存储数据模型,并对系统进行了设计,给出了系统架构及各个数据和控制流程.最后分析系统可能存在的瓶颈,给出测试性能数据,满足性能要求.
其他文献
针对软件即服务(SaaS)模式下,难以满足客户个性化服务需求以及目前对影响SaaS模式下个性化服务的关键因素——用户,研究较少的现状.本文通过对SaaS平台用户行为的研究,首先提出一种基于隐半马尔科夫的用户行为特征提取模型,用以解决平台用户隐式信息难以获取的问题.该模型使用状态驻留时间的概率分布来控制用户浏览行为,将描述特征的隐状态和时间的相关性紧密结合,应用改进的Viterbi算法得到用户特征序
在包含海量、异构计算节点的物联网中,许多便携、嵌入式计算节点自身计算与存储能力较为有限,需要向周围其他节点请求资源来完成自身任务;此外,由于物联网中的节点可以动态加入与退开,环境中的可用资源数也时刻处于波动之中.因此,需要提供有效的机制来满足物联网中资源共享与分配的需求.针对此方面,本文提出一种基于竞价与信誉度的联合式资源分配机制CRAM.该机制采用非合作博弈的方式,可让计算节点根据环境内服务中心
云计算系统中基础设施即服务层通过对虚拟化后的基础设施的池化管理来完成云内基础设施资源的管理.资源的池化为云服务提供按需索取方式的资源供应以及动态的资源配给.本文针对现有云计算平台缺乏针对资源供应量的自动调整机制的问题,研究了云计算平台中基础设施资源供给的自适应性.本文主要研究了云服务运行过程中因业务负载的变化造成的资源需求的变化情况,通过对云服务的业务负载的建模,动态评估业务负载的变化情况.云计算
在智能人-机交互系统中,语音信号的情感分类是目前流行的研究领域,并且得到了广泛的应用.文章提出一种新的基于情感特征提取和借助支持向量机(support vector machine,SVM)分类器(classifier)的情感互相关性算法,并应用于语音情感识别.利用这种方法对4 种情感(愤怒、高兴、悲伤和中立)语音信号进行情感分类.SVM 分类器是利用情感语音信号中互相关性的特征提取进行分类的.借
云计算系统通常覆盖大规模的软硬件资源.软硬件系统的系统故障,包括硬件失效、软件崩溃、网络不稳定等情况在云计算系统规模足够大的情况下将成为一种常态现象.为保证在发生系统故障时候云服务的可用性,云计算平台需要具备一定的能力应对系统异常并保证平台的最小可用性,即云计算平台需要具备在异常情况下的存活能力. 本论文的主要研究云计算平台的生存性问题,设计并提出一种云计算平台生存性机制,利用虚拟化技术把硬件环境
提出了一种基于小波变换与混沌映射的自适应图像水印算法.该算法中水印由混沌序列生成,在宿主图像的低频系数中嵌入水印信息,嵌入时根据低频逼近系数和高频系数的特点以及树结构关系,给每一个低频系数确定一个相关掩蔽参数,并用此参数控制其对应低频系数嵌入水印时的相对修改强度.实验表明:使用该算法具嵌入的数字水印具有很好的隐蔽性、安全性、自适应性及较理想的鲁棒性,是一种行之有效的图像版权保护方法.
工作流调度优化已成为分布式计算的挑战性研究课题之一.分布式工作流调度模型的核心是根据业务逻辑工作流的控制依赖和数据依赖关系,屏蔽服务共享操作的复杂性,选择最佳的服务实例有效组合起来协作完成用户实际需求.本文针对分布式工作流的特点,提出了基于微粒群的整数-二进制编码业务路径替代调度算法IBPSOA(Integer-Binary coding Particle Swarm Optimization A
云计算在企业软件市场上具有相当大的潜力,它给 SaaS (Software as a Service)带来了机遇.传统的 Web 系统向多租户 SaaS 应用的转型可以重复利用软件资源,降低软件再开发的的成本和风险.然而目前缺乏通用的迁移工具和方法.本 文首先在此背景下提出了一种基于数据中间件的传统 Web 系统向多租户 SaaS 应用转换的通用方法.该方法松耦合,对具体的应用层透明.其次,详细描
为了解决无线Mesh网络(Wireless Mesh Networks,WMN)中业务对信道资源的过度竞争而导致的信道利用率低下及时延表现不佳问题,提出一种无线Mesh网络环境下针对时延敏感业务的时延控制机制.该机制首先通过分析无线Mesh网络中信道利用率与节点尝试发送数据概率的关系,将节点尝试发送数据概率控制在信道可有效支撑的一定范围内.然后将时延与节点尝试发送数据概率作为NUM模型的约束参数,
流量测量是网络维护和异常诊断的前提.本文针对华北某省实际运营的CDMA2000 3G核心网流量进行了测量与分析.为解决流量采集的问题,设计并实现了一个3G流量采集系统.测量内容包括IP报文长度分布、TCP选项、用户吞吐量以及TCP往返时间等.对测量结果进行分析并与已有的测量结果进行了比较,进一步提出了减小MTU提高3G网络性能的方法.这些测量结果还可以为3G网络的维护、异常诊断以及3G流量建模提供