文本处理中的MapReduce技术

来源 :中文信息学报 | 被引量 : 0次 | 上传用户:hzq5157585
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
用于文本处理的很多数据集已经达到TB、PB甚至更大规模,传统的单机方法难以对这些数据进行有效处理。近年来出现的MapReduce计算框架能够以简洁的形式和分布式的方案来解决大规模数据的并行处理问题,得到了学术界和工业界的广泛认可和使用。目前,MapReduce已经被用于自然语言处理、机器学习及大规模图处理等领域。该文首先对MapReduce做了简单的介绍,并分析了其特点、优势还有不足;然后对MapReduce近年来在文本处理各个方面的应用进行分类总结和整理;最后对MapReduce的系统和性能方面的研究也做了一些介绍与展望。
其他文献
本篇论文是对汉代画像石、画像砖的制作工艺、装饰艺术、以及绘画性语言进行的研究,汉民族不仅是一部文字记载的历史、而且还是一个图像呈现的世界。汉画像石、画像砖以其丰
中国商业银行是金融市场的重要组成部分,完善的金融系统对于一个国家的政治、经济的稳定运行与发展有着深远的意义。商业银行统领中国金融行业的日常运转,其主要功能是吸纳社
在人们精神文化生活日渐疏离的今天,宗教旅游地以其深厚的文化底蕴和丰富的历史景观资源受到旅游者的青睐,福建莆田湄洲岛妈祖朝圣地更是以其妈祖祖庙的独特地位和优美的滨海
近年来,随着我国体育事业的迅猛发展,作为体育事业发展的基础——体育场馆,其数量也有大幅增加。各级政府都更加重视大型体育场馆的建设可以带来的丰厚回报,不仅希望借助大型
我国试点城市(区)已基本推行双向转诊制度,同时积极探索试行社区首诊,并开始启动全科医生制度建设,但在双向转诊实际运行中发现,总体转诊率普遍不高,下转难问题更是严重,从上级医院转
随着现代人们生活水平和科学文化技术的快速发展,人们对物质文明和精神文明的需求也越来越高,而包装印刷行业只有通过不断的进行技术改进来逐渐满足人们日益增长的精神文明的
在我国的社会财富的快速积累,国内居民个人收入的迅速发展和国内产业转型的大背景下,国内商业银行和服务的传统模式已经不能让客户满足。而另一方面,互联网金融的不断崛起,增
自动喷水灭火系统是目前世界上使用最为广泛的一种固定灭火装置,具有安全可靠、经济实用、灭火成功率高、维护简单、不污染环境、寿命长等特点。尤其是当今世界,环境污染日趋
由于其早期的发展,防火无故障服务的各大城市高层建筑的发展和技术力量相当不错,已通过多年fumbles也是强有力的。但是,工作中的小型和中型城市和城市特别是作者在启动更多最
经济全球化是当今世界的基本发展趋势之一。在过去的二十年里,经济全球化迅速发展,深深地改变了世界贸易的竞争本质,合作共赢成为全球经济发展的主流。经济全球化虽然在20世