基于Hadoop的高性能海量数据处理平台研究

来源 :2012全国高性能计算学术年会 | 被引量 : 0次 | 上传用户:pz421769788
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  海量数据高性能计算蕴藏着巨大的应用价值,但是目前云计算体系只具有海量数据处理能力,不具有足够的高性能计算能力。本研究将具有超强并行计算能力的GPU与云计算进行融合,提出了基于CPU/GPU协同的异构高性能云计算体系结构。以开源Hadoop为基础,采用注释码的形式,对MapReduce函数中需要并行的部分进行标记。通过定制GPU类加载器将被标记代码转换为CUDA代码并动态编译运行。该平台将GPU的计算能力融合到MapReduce框架中可高效处理海量数据。
其他文献
毕业于浙江大学旅游经济学硕士班的杨芳菲是杭州市政协委员。她多才多艺,涉足广泛, 曾任广告公司艺术总监,出版社编辑,杭州市摄影家协会理事,曾策划过许多大型活动, 现从事房
  对西藏尼龙玛地区地质概况进行简要分析,用分形方法中的含量—面积法对西藏尼龙玛地区1∶5万水系沉积物数据进行分析处理,识别出局部异常,圈定出了铜元素的异常分布图。与常
据《中华预防医学杂志》1995年29卷第2期报道 中国预防医学科学院劳动卫生与职业病研究所吴维皑等,对477名接触丙烯腈女工和527名对照组女工应用回顾性队列研究方法,进行了
  青海省都兰县双庆铁矿床位于青海省都兰县西南60km,距香日德镇北2 km,属都兰县管辖,交通方便。鉴于双庆铁矿床地质研究程度总体较低,目前仅见对其构造控矿及矿物共生组合
隐伏铀资源潜力预测地球化学评价以成矿规律和技术—经济条件保证程度的双控制因素和优选性作为准则,其地球化学评价参数及指标体系主要包括:成矿特征参数,地球化学参数,水文
身心健康的人,充实会伴随而行。那么,何为充实呢?它是一种神有所归、虑有所定、心有所寄、灵有所安的活动,建立富足的精神家园,实现人生自我价值,就是真正的充实。与之相反,
上海世博会即将于2010年5月1日开幕。在有限的时间里,面对上海世博会园区5.28 平方公里的面积,共90 多万平方米的几百个场馆,您将如何参观才能不错过其中的精彩看点?为此上海人民出版社特邀上海世博会园区总规划师吴志强教授,精心策划出一部面向市场,为广大世博参观者提供服务的实用型图书——《上海世博会精彩看点》。    《上海世博会精彩看点》  吴志强著  上海人民出版社 2010.4  定价:
  本文介绍了蛋白质定量软件的设计及测试结果.分析结果表明:P-QuantWiz软件在曙光6000的Intel集群部分,测试规模达到2048核,在256核加速比仍在增加.相对P-QuantWiz软件在单
  钼元素多以低价硫化物形式存在,在强氧化条件下也形成高价态离子或络合物,"分散富存"于中—基性岩、酸性岩或被铁锰氧化物、有机质吸附而赋存于黑色岩系、第四系高铁、锰风
  元素地球化学异常分析对矿体原生晕具有较好的指示意义,因此,元素地球化学分析结合地质背景资料及地球物理探测等方法的多学科综合找矿方法是隐伏矿勘察的必要手段。珠琳
会议