避免“宠物计划”让数据湖更好地创造价值

来源 :中国计算机报 | 被引量 : 0次 | 上传用户:dajianshi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  存储大量数据对企业来说一直是个挑战,相比之下,如何以易于访问和有效的方式管理数据更是严峻的挑战,“数据湖”就是一个有效的解决方案。
  数据湖和大数据技术,如Hadoop、HDFS、Hive和HBase,这些在当下是非常流行的解决方案,特别是对于那些需要用更好的方式来存储和处理大量数据和分析的组织来说。由于它们能够以各种形式从各种应用程序提供原始数据,所以通常比企业数据仓库的成本更低。采用这些技术的目的是,组织可以轻松地搜索他们需要的信息,无论来源或格式,帮助他们在日常的业务运作中更有效地分析利用。
  除了以上优势,数据湖还为企业提供了一个能力——将数据货币化。由于太多企业在没有考虑长期目标的情况下构建数据湖,使得他们缺少将数据湖转化为可扩展的、弹性的数据货币化平台的能力,导致他们在数据湖中错失了机遇。
  因此,下面有五个常见的企业实施错误,可以帮助企业更好地部署数据湖。
  太多Hadoop。当Hadoop发行版或群集在企业中大量应用时,这时存储的也许只是大量重复数据。许多企业一点一点地按部门部署Hadoop,造成数据孤岛,阻碍大数据分析,使得员工无法利用所有数据进行全面分析。这实质上只是重复了数据仓库、集市的问题。
  太多的管理。一些组织对于数据湖的管理设定了太多限制,例如数据湖的查看、访问和处理权限,没有权限的人不能够访问数据库,导致数据无用。
  缺乏有效的管理。太多的管理会适得其反,但缺乏有效的管理也不行。如果数据湖没有被有效管理起来,那么数据湖会迅速被大量低质量的数据所淹没,导致数据被“污染”或“篡改”,最终使得业务不再信任这些数据,使整个数据湖再次变得无用。
  非弹性架构。组织错误最常见的是用非弹性架构来构建他们的数据湖。由于数据存储成本很高,组织往往一次一个服务器缓慢而有机地扩展其大数据环境,通常从基础服务器开始,最终添加高性能服务器以跟上业务需求。随着时间的推移,数据存储的增长超出了计算需求的增长,维持如此庞大的物理环境不仅繁琐,成本也是问题。
  “宠物计划”。IT团队经常把數据湖的实施视为“宠物计划”,认为如果建立数据湖,就会推动业务团队去使用它。 IT团队希望构建数据湖,并对IT数据执行分析,以证明他们可以代表业务执行分析。但是从业务的角度看,IT使用案例是一个出乎意料的低价值工作,没有为业务利益相关者建立可信度。
  创建协同价值创造平台
  利用数据湖进行数据货币化的障碍远大于实施数据湖的挑战。但企业如果不了解各种机遇,企业就很难看到更大的局面,并为其数据湖投入足够的资源。
  对于抓住机遇,成功克服这些障碍的组织,“数据湖未来”即将到来。 这个未来是专为那些完全接受数据和分析的特性的人所保留的,并且理解数字资产的力量是永不枯竭的,并且可以以接近于零的边际成本在无数用例上使用。 他们将数据湖看作是“协同价值创造平台”,不仅将推动新的效率水平,而且将推动新的数据货币化机会。
  与任何新兴技术一样,完全进入数据湖还需要时间。
其他文献
5月31日,台北国际电脑展(COMPUTEX)拉开序幕。对于英特尔来说这本是一场常规参与的盛会,但却被外界看作是自4月底英特尔宣布重大重组计划之后的首秀,因此格外引人注目。  最近,英特尔公布了一份还算不错的财报,但之后却宣布全球裁员11%,转型力度之大着实让人吃惊。其实回顾英特尔转型之路,要从CEO科再奇上任开始:加大物联网新领域的投入,167亿美元收购FPGA企业Altera加强云端实力,将体
英特尔至强融核处理器为更快速的数据分析提供了坚实的基础,同时也是高性能计算应用创新的引擎。英特尔通过不断增强的高性能计算产品线、广泛的合作伙伴联盟,以及不断推陈出新的软件工具,将高性能计算应用推向一个新的高潮。  很多人对Viscovery这个公司的名字并不太熟悉,但是提到正在热播的由江苏卫视打造的大型明星竞技真人秀《我们战斗吧》,可能很多人都会有所了解。作为《我们战斗吧》的衍生产品之一,由Vis
国内外一众“Stack”公司,比如EasyStack、UnitedStack、TeutoStack、SwiftStack等,它们的OpenStack之路是否能够走得长远,也许未来三五年就会见分晓。  2015年,中国公有云市场显露出大洗牌的苗头。有的公有云服务商甚至这样说:未来两三年将成为决定中国公有云市场格局的关键时期,最终能够胜出并引领公有云市场发展的可能只有两三家服务商。  在OpenSta
近日,赛迪智库规划研究所编译了德勤发布的年度报告《2017技术趋势:运动中的企业》,报告中详细阐述了机器智能这一技术趋势。  机器智能(MI)是代表新认知时代的一系列技术总称,人工智能(AI)是 MI 的一部分。  近年来,机器学习、深度学习、高级认知分析、机器人自动化、机器人技术等领域取得了快速发展。  当前,一些领域已出现了机器智能应用实例。例如,在医疗领域,某医院正在“训练”其机器智能系统分
1991年,伟仕佳杰成立,一个年轻的团队开始主攻国际知名IT产品及相关配件的分销领域。历经26年的发展,伟仕佳杰已经成长为亚太地区知名的科技产品解决方案与大数据综合服务平台,拥有近5000名业内优秀人才。  在经过多年行业内默默耕耘及资本运作后,如今的伟仕佳杰凭借雄厚的资金实力、优质的银行信用、庞大的产品组合和线上线下全渠道综合实力,为企业提供一站式、全品类信息化服务,助力其发展;也为个人提供前沿
传统成熟的IT系统架构正成为企业前沿業务领域的屏障。在新的IT系统架构下,如何降低成本,节约时间,提升系统自我学习和自我修复的能力,是CIO在未来的一项重要竞争优势。因为随着企业越来越依赖于技术来提供新产品和服务,速度对新技术企业来说比效率更重要。
9月20日,乐视体育“易主”消息不胫而走,实际控制人贾跃亭将其所持有的乐视体育绝大多数的股份转让给新投资者,虽然消息没有得到官方的确认,但是不断陷入各式危机的乐视体育早已不复当年盛况,已经沦为乐视的“累赘”。股份的转让标志着“贾跃亭时代”乐视体育的终结。  资本的双刃剑,乐视激进的发展,透支了乐视体育。乐视体育曾在投融圈缔造了B轮融资额及估值的新纪录,单笔融资80亿元,估值215亿元,B轮融资与A
国内的传统管理软件向云转型已经有一段时间,但是怎么转才算成功,当前尚无定论。老牌的协同OA厂商致远软件通过多年的探索,终于将转型聚焦在打造云端企业级业务搭建PaaS平台formtalk上。  打造云端业务搭建PaaS平台  致远软件副总裁、formtalk项目负责人李平告诉记者,这几年来致远软件一直在思考在移动互联网时代该如何转型,并为此做了很多努力,先后推出了帮助用户管理和服务客户的“大家社区”
商业WiFi背景  近几年中国智能手机增长加速,根据中国互联网络信息中心(CNNIC)研究报告显示,在2012年,中国手机网民规模达到3.56亿,截至2016年6月,中国手机网民规模达6.56亿,上网设备进一步向移动端集中,在这样一个背景下WiFi免费接入成为人们的必需品。  商业WiFi随着这一波浪潮而产生,商业WiFi是为商业客户提供的包括硬件、软件、服务、运营等内容的系统解决方案,商业WiF
近日,中国电子信息产业集团有限公司第六研究所在中国电子信息安全技术研发基地举办了“工业控制系统信息安全技术国家工程实验室理事会第二次会议暨联合创新成果展”。工控信息安全领域的核心芯片厂商、基础软件厂商、设备单机厂商、信息安全解决方案厂商等32家理事会成员单位集中展示了各家的产品和解决方案。