论文部分内容阅读
VivaKi是一家全球广告公司，现在正将“Kognitio”云分析平台集成到其研发数据实验室中。公司表示这项举措将极大地减少查询大规模数据集所需的时间。
VivaKi的研发实验室名叫VivaKi神经中心，它是这家广告公司旗下四个主要的机构部门及其业务客户、合作伙伴共享的资源。
“基本上，它是一套支持数字广告公司运营的一整套技术资产工具集。”VivaKi神经中心首席技术官（CTO）Pradeep Ananthapadmanabhan表示。
Kognitio是一个内存内分析平台，企业组织使用它可以使其BI或数据管理系统更加快速有效。其云版本——Kognitio云，是一个PaaS平台，用户可以基于订阅的模式使用Kognitio的分析平台。它提供一套开放的数据库连接（ODBC）系统，用于管理和分析数据。对于IT部门来说，基于云的分析平台将免除内部的维修工作，包括软、硬件的更新升级。
VivaKi神经中心将通过AWS（Amazon Web Services）部署Kognitio云。“我们使用Amazon的一套云服务，包括其他的大数据处理技术，例如Hadoop。” Ananthapadmanabhan说。
对于VivaKi来说，Kognitio云最大的贡献之一在于它能够将大量数据转化成可供分析查询的语言，并且是以传统的关系型数据库无法达到的速度实现的。公司先前使用的是传统的工具——例如SQL服务器来处理多个来源的TB级数据。
在最近使用Kognitio云的测试中，VivaKi已经能够将其处理大量数据集的时间从原来的10小时缩减到30分钟。基于目前完成的测试情况，VivaKi神经中心计划很快部署Kognitio云。
搜索世界和互联网广告的王者谷歌无疑是走在大数据分析平台实践前列的先行者。大名鼎鼎的Hadoop就起源于谷歌在2003年底和2004年发表的两篇学术论文。第一篇介绍了谷歌的文件系统，将海量的数据保存在上千台普通廉价的PC上；第二篇论文介绍了MapReduce算法，将所有服务器中的处理器有效的利用起来计算海量数据并得到想要的结果。八年之后，Hadoop得到了广泛的使用，其应用范围从数据分析到各式各样的数值计算等。
“广告业尤其可以从大数据技术中获益。”Ananthapadmanabhan表示。Kognitio的技术已经使VivaKi能在一周内就获得额外的分析能力，而非之前传统数据系统所需的几个月时间，他补充说。
内存内分析平台正引起广泛的关注，是一项可能引起Kognitio和其竞争对手关注的技术。根据2012年度的Gartner技术成熟度曲线报告，包括“私有云计算”和“内存内数据库管理系统”的大数据条目目前均处在过热期，对于这些技术的期望和热情正处在顶峰。
然而从另一面看，一些行业的抵制情绪可能阻碍采用新型数据管理工具的进程。Quartet FS是ActivePivot内存内分析平台的创造者，其最近的一项报告称，57%的IT经理将内存内分析技术的“创新”视为“在其银行系统中应用最大的障碍”。
对于任何技术来说，IT部门的沉默都可能意味着它是短命的。但是，如果新技术在处理大数据相关问题上被证明是有效的，情况则会完全不同。IDC预测大数据技术和服务市场规模将从2010年的32亿美元飞跃至2015年的169亿美元，年均复合增长率高达40%。
Forrester预计采用针对智能分析（BI）的公有云和私有云解决方案将在不远的未来快速增长。实际上，Forrester最近的调查显示38%的企业表示他们正计划在2013年底前采用商业智能软件即服务（BIaaS）服务项目。
“我们周围的信息正在爆炸：每分钟内大约产生1，500个博客，98，000条微博，以及168，000,000封电子邮件，更不用提众多其他为巨量数据增长做出贡献的数据源种类。”Forrester分析师Holger Kisker在他最近的博客中写道，“今年我们面临的将是一个数据总量达到2.7ZB的数据星球。Forrester预计目前持续的数据增长将在未来几年超越摩尔定律。”
IT业界对这样的趋势必然不会视而不见。据了解，在中国领先的第三方广告技术公司秒针系统已经采用SAP HANA大型计算数据平台。作为最典型的大数据企业，秒针系统拥有国内最大的广告服务器集群，日均广告曝光30亿，每日处理数据超过2TB。通过与SAP的合作，秒针实时处理海量数据的能力得到进一步提升。
VivaKi的研发实验室名叫VivaKi神经中心，它是这家广告公司旗下四个主要的机构部门及其业务客户、合作伙伴共享的资源。
“基本上，它是一套支持数字广告公司运营的一整套技术资产工具集。”VivaKi神经中心首席技术官（CTO）Pradeep Ananthapadmanabhan表示。
Kognitio是一个内存内分析平台，企业组织使用它可以使其BI或数据管理系统更加快速有效。其云版本——Kognitio云，是一个PaaS平台，用户可以基于订阅的模式使用Kognitio的分析平台。它提供一套开放的数据库连接（ODBC）系统，用于管理和分析数据。对于IT部门来说，基于云的分析平台将免除内部的维修工作，包括软、硬件的更新升级。
VivaKi神经中心将通过AWS（Amazon Web Services）部署Kognitio云。“我们使用Amazon的一套云服务，包括其他的大数据处理技术，例如Hadoop。” Ananthapadmanabhan说。
对于VivaKi来说，Kognitio云最大的贡献之一在于它能够将大量数据转化成可供分析查询的语言，并且是以传统的关系型数据库无法达到的速度实现的。公司先前使用的是传统的工具——例如SQL服务器来处理多个来源的TB级数据。
在最近使用Kognitio云的测试中，VivaKi已经能够将其处理大量数据集的时间从原来的10小时缩减到30分钟。基于目前完成的测试情况，VivaKi神经中心计划很快部署Kognitio云。
搜索世界和互联网广告的王者谷歌无疑是走在大数据分析平台实践前列的先行者。大名鼎鼎的Hadoop就起源于谷歌在2003年底和2004年发表的两篇学术论文。第一篇介绍了谷歌的文件系统，将海量的数据保存在上千台普通廉价的PC上；第二篇论文介绍了MapReduce算法，将所有服务器中的处理器有效的利用起来计算海量数据并得到想要的结果。八年之后，Hadoop得到了广泛的使用，其应用范围从数据分析到各式各样的数值计算等。
“广告业尤其可以从大数据技术中获益。”Ananthapadmanabhan表示。Kognitio的技术已经使VivaKi能在一周内就获得额外的分析能力，而非之前传统数据系统所需的几个月时间，他补充说。
内存内分析平台正引起广泛的关注，是一项可能引起Kognitio和其竞争对手关注的技术。根据2012年度的Gartner技术成熟度曲线报告，包括“私有云计算”和“内存内数据库管理系统”的大数据条目目前均处在过热期，对于这些技术的期望和热情正处在顶峰。
然而从另一面看，一些行业的抵制情绪可能阻碍采用新型数据管理工具的进程。Quartet FS是ActivePivot内存内分析平台的创造者，其最近的一项报告称，57%的IT经理将内存内分析技术的“创新”视为“在其银行系统中应用最大的障碍”。
对于任何技术来说，IT部门的沉默都可能意味着它是短命的。但是，如果新技术在处理大数据相关问题上被证明是有效的，情况则会完全不同。IDC预测大数据技术和服务市场规模将从2010年的32亿美元飞跃至2015年的169亿美元，年均复合增长率高达40%。
Forrester预计采用针对智能分析（BI）的公有云和私有云解决方案将在不远的未来快速增长。实际上，Forrester最近的调查显示38%的企业表示他们正计划在2013年底前采用商业智能软件即服务（BIaaS）服务项目。
“我们周围的信息正在爆炸：每分钟内大约产生1，500个博客，98，000条微博，以及168，000,000封电子邮件，更不用提众多其他为巨量数据增长做出贡献的数据源种类。”Forrester分析师Holger Kisker在他最近的博客中写道，“今年我们面临的将是一个数据总量达到2.7ZB的数据星球。Forrester预计目前持续的数据增长将在未来几年超越摩尔定律。”
IT业界对这样的趋势必然不会视而不见。据了解，在中国领先的第三方广告技术公司秒针系统已经采用SAP HANA大型计算数据平台。作为最典型的大数据企业，秒针系统拥有国内最大的广告服务器集群，日均广告曝光30亿，每日处理数据超过2TB。通过与SAP的合作，秒针实时处理海量数据的能力得到进一步提升。