论文部分内容阅读
摘要:大数据是指所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。本文通过对大数据的应用进行分析,解析大数据的关键技术,并结合通信运营商IT支撑系统特点,说明在电信运营商IT支撑系统中的应用方式,为相关企业在IT领域实施大数据应用提供参考。
关键字:大数据;变更;通信运营商;
中图分类号:F626.5 文献标识码:A
引言
[1]大数据浪潮,汹涌来袭,与互联网的发明一样,这绝不仅仅是信息技术领域的革命,更是在全球范围启动透明政府、加速企业创新、引领社会变革的利器。现在管理学之父德鲁克有言,预测未来最好的方法,就是去创造未来。而“大数据战略”,则是当下领航全球的先机。
大数据的4V特点:第一,数据体量巨大(Volume),从TB级别,跃升到PB级别;第二,数据类型繁多(Variety),如网络日志、视频、图片、地理位置信息等等。第三,价值密度低,商业价值高(Value),以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。第四,处理速度快(Velocity),1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同。
大数据带来的影响
大数据时代来临首先由数据丰富度决定的。社交网络兴起,大量的UGC(互联网术语,全称为User Generated Content,即用户生成内容的意思)内容、音频、文本信息、视频、图片等非结构化数据出现了。另外,物联网的数据量更大,加上移动互联网能更准确、更快地收集用户信息,比如位置、生活信息等數据。从数据量来说,目前已进入大数据时代,但现在的硬件明显已跟不上数据发展的脚步。
以往大数据通常用来形容一个公司创造的大量非结构化和半结构化数据,而现在提及“大数据”,通常是指解决问题的一种方法,即通过收集、整理生活中方方面面的数据,并对其进行分析挖掘,进而从中获得有价值信息,最终衍化出一种新的商业模式。
虽然大数据目前在国内还处于初级阶段,但是商业价值已经显现出来。首先,手中握有数据的公司站在金矿上,基于数据交易即可产生很好的效益;其次,基于数据挖掘会有很多商业模式诞生,定位角度不同,或侧重数据分析。比如帮企业做内部数据挖掘,或侧重优化,帮企业更精准找到用户,降低营销成本,提高企业销售率,增加利润。
未来,数据可能成为最大的交易商品。但数据量大并不能算是大数据,大数据的特征是数据量大、数据种类多、非标准化数据的价值最大化。因此,大数据的价值是通过数据共享、交叉复用后获取最大的数据价值。在他看来,未来大数据将会如基础设施一样,有数据提供方、管理者、监管者,数据的交叉复用将大数据变成一大产业。
安全隐私重新界定
大数据在给我们带来便利的同时,让我们有种安全威胁感,由于在无形之中有一个“第三只眼”在注视着我们的行动,让我们的隐私权受到了威胁。这种数据使用不当,将会让社会上别有用心之人加以利用,对我们个人、企业乃至社会将带来巨大动荡。
某些特殊行业的应用,比如金融数据、医疗信息以及政府情报等都有自己的安全标准和保密性需求。虽然对于IT管理者来说这些并没有什么不同,而且都是必须遵从的,但是,大数据分析往往需要多类数据相互参考,而在过去并不会有这种数据混合访问的情况,大数据应用催生出一些新的、需要考虑的安全性问题,这就充分体现出利用基于DuraClass 技术的LSI SandForce®;闪存处理器的优势了,实现了企业级闪存性能和可靠性,实现简单、透明的应用加速,既安全又方便。
为了利用好大数据,并消除大数据带来的安全威胁,就要进行变革。
个人隐私保护,从个人许可到让数据使用者承担责任。
个人可以并应该为他们的行为而非倾向负责。
击碎黑盒子,大数据算法师的崛起。
反对数据垄断大亨的出现。
大数据在电信运营商中的应用介绍
[2]有了大数据的帮助,我们不会再将世界看作是一连串我们认为或是自然或是社会现象的时间,我们会意识到本质上世界是由信息构成的。数据的真实价值就像漂浮在海洋中的冰山,第一眼只能看到冰山一角,而绝大部分则隐藏在表面之下。现在的很多企业,都在利用已知的数据进行挖掘、分析,系统通过海量数据找到数据之间的内在联系,发掘出客户的潜在需求,提升企业自身价值。如亚马逊早期与AOL大成路一项协议,为AOL电子商务网站提供后台技术服务。而亚马逊用意在于掌握用户的数据,找到用户在看什么、买什么。这些数据帮助亚马逊提高了推荐引擎性能。这就是数据的价值,这就是通过数据再利用为企业带来的创新。
在电信运营商中,能记录每一个客户手机连接基站的信息,包括信号的强弱。运营商长期使用这些数据来微调其网络的性能,决定哪里需要添加或者升级基础设施。现在这些信息已经可以帮助手机制造商们了解影响信号强弱的因素,从而改善手机的接收质量。同时,这些数据也可以帮助政府掌握交通拥堵时间、人群密集区域等信息,为社会基础建设改造提供有效数据依据。
[3]近20年来,商务智能、社交网站、无线传感器、云计算、语义网等等新的技术风驰电掣般进入到了我们的生活,软件开源、数据开放、普适计算、软件及服务、智慧城市、智慧地球等等新的思想令人应接不暇,电信也如Sprint公司、英国电信运营商、法国电信公司Bouygues Telecom都在应用大数据分析作为企业战略,这种以数据分析为竞争能力的公司都是各自领域的领袖,他们都把自己的成功归功于对数据分析的娴熟应用。
结束语
大数据是一种资源,也是一种工具。他告知信息但不解释信息。他指导人们去理解,但有时也会引起误解,这取决于是否被正确使用。大数据的力量是那么耀眼,我们必须避免被它的光芒诱惑,并善于发现它固有的瑕疵。
[2]大数据并不是一个充斥着运算法则和机器的冰冷世界,其中仍需要人类扮演重要角色。人类独有的弱点、错觉、错误都是十分必要,因为这些特性的另一头牵着的是人类的创造力、直觉和天赋。偶尔也会带来屈辱或固执的同样混乱的大脑运作,也能带来成功,或在偶然间促成我们的伟大。这提示我们应该乐于接受类似的不准确,因为不准确正是我们之所以为人的特征之一。就好像我们学习处理混乱数据一样,因为这些数据服务的是更加广大的目标。毕竟混乱构成了世界的本质,也构成了人脑的本质,而去论是世界的混乱还是人脑的混乱,学会接受和应用他们才能得益。
参考文献
[1] 涂子沛.大数据.2013,4.
[2] 维克托·迈尔-舍恩伯格,肯尼思·库克耶.大数据时代.2013,1.
[3] Bill Franks.驾驭大数据.2013,1.
关键字:大数据;变更;通信运营商;
中图分类号:F626.5 文献标识码:A
引言
[1]大数据浪潮,汹涌来袭,与互联网的发明一样,这绝不仅仅是信息技术领域的革命,更是在全球范围启动透明政府、加速企业创新、引领社会变革的利器。现在管理学之父德鲁克有言,预测未来最好的方法,就是去创造未来。而“大数据战略”,则是当下领航全球的先机。
大数据的4V特点:第一,数据体量巨大(Volume),从TB级别,跃升到PB级别;第二,数据类型繁多(Variety),如网络日志、视频、图片、地理位置信息等等。第三,价值密度低,商业价值高(Value),以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。第四,处理速度快(Velocity),1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同。
大数据带来的影响
大数据时代来临首先由数据丰富度决定的。社交网络兴起,大量的UGC(互联网术语,全称为User Generated Content,即用户生成内容的意思)内容、音频、文本信息、视频、图片等非结构化数据出现了。另外,物联网的数据量更大,加上移动互联网能更准确、更快地收集用户信息,比如位置、生活信息等數据。从数据量来说,目前已进入大数据时代,但现在的硬件明显已跟不上数据发展的脚步。
以往大数据通常用来形容一个公司创造的大量非结构化和半结构化数据,而现在提及“大数据”,通常是指解决问题的一种方法,即通过收集、整理生活中方方面面的数据,并对其进行分析挖掘,进而从中获得有价值信息,最终衍化出一种新的商业模式。
虽然大数据目前在国内还处于初级阶段,但是商业价值已经显现出来。首先,手中握有数据的公司站在金矿上,基于数据交易即可产生很好的效益;其次,基于数据挖掘会有很多商业模式诞生,定位角度不同,或侧重数据分析。比如帮企业做内部数据挖掘,或侧重优化,帮企业更精准找到用户,降低营销成本,提高企业销售率,增加利润。
未来,数据可能成为最大的交易商品。但数据量大并不能算是大数据,大数据的特征是数据量大、数据种类多、非标准化数据的价值最大化。因此,大数据的价值是通过数据共享、交叉复用后获取最大的数据价值。在他看来,未来大数据将会如基础设施一样,有数据提供方、管理者、监管者,数据的交叉复用将大数据变成一大产业。
安全隐私重新界定
大数据在给我们带来便利的同时,让我们有种安全威胁感,由于在无形之中有一个“第三只眼”在注视着我们的行动,让我们的隐私权受到了威胁。这种数据使用不当,将会让社会上别有用心之人加以利用,对我们个人、企业乃至社会将带来巨大动荡。
某些特殊行业的应用,比如金融数据、医疗信息以及政府情报等都有自己的安全标准和保密性需求。虽然对于IT管理者来说这些并没有什么不同,而且都是必须遵从的,但是,大数据分析往往需要多类数据相互参考,而在过去并不会有这种数据混合访问的情况,大数据应用催生出一些新的、需要考虑的安全性问题,这就充分体现出利用基于DuraClass 技术的LSI SandForce®;闪存处理器的优势了,实现了企业级闪存性能和可靠性,实现简单、透明的应用加速,既安全又方便。
为了利用好大数据,并消除大数据带来的安全威胁,就要进行变革。
个人隐私保护,从个人许可到让数据使用者承担责任。
个人可以并应该为他们的行为而非倾向负责。
击碎黑盒子,大数据算法师的崛起。
反对数据垄断大亨的出现。
大数据在电信运营商中的应用介绍
[2]有了大数据的帮助,我们不会再将世界看作是一连串我们认为或是自然或是社会现象的时间,我们会意识到本质上世界是由信息构成的。数据的真实价值就像漂浮在海洋中的冰山,第一眼只能看到冰山一角,而绝大部分则隐藏在表面之下。现在的很多企业,都在利用已知的数据进行挖掘、分析,系统通过海量数据找到数据之间的内在联系,发掘出客户的潜在需求,提升企业自身价值。如亚马逊早期与AOL大成路一项协议,为AOL电子商务网站提供后台技术服务。而亚马逊用意在于掌握用户的数据,找到用户在看什么、买什么。这些数据帮助亚马逊提高了推荐引擎性能。这就是数据的价值,这就是通过数据再利用为企业带来的创新。
在电信运营商中,能记录每一个客户手机连接基站的信息,包括信号的强弱。运营商长期使用这些数据来微调其网络的性能,决定哪里需要添加或者升级基础设施。现在这些信息已经可以帮助手机制造商们了解影响信号强弱的因素,从而改善手机的接收质量。同时,这些数据也可以帮助政府掌握交通拥堵时间、人群密集区域等信息,为社会基础建设改造提供有效数据依据。
[3]近20年来,商务智能、社交网站、无线传感器、云计算、语义网等等新的技术风驰电掣般进入到了我们的生活,软件开源、数据开放、普适计算、软件及服务、智慧城市、智慧地球等等新的思想令人应接不暇,电信也如Sprint公司、英国电信运营商、法国电信公司Bouygues Telecom都在应用大数据分析作为企业战略,这种以数据分析为竞争能力的公司都是各自领域的领袖,他们都把自己的成功归功于对数据分析的娴熟应用。
结束语
大数据是一种资源,也是一种工具。他告知信息但不解释信息。他指导人们去理解,但有时也会引起误解,这取决于是否被正确使用。大数据的力量是那么耀眼,我们必须避免被它的光芒诱惑,并善于发现它固有的瑕疵。
[2]大数据并不是一个充斥着运算法则和机器的冰冷世界,其中仍需要人类扮演重要角色。人类独有的弱点、错觉、错误都是十分必要,因为这些特性的另一头牵着的是人类的创造力、直觉和天赋。偶尔也会带来屈辱或固执的同样混乱的大脑运作,也能带来成功,或在偶然间促成我们的伟大。这提示我们应该乐于接受类似的不准确,因为不准确正是我们之所以为人的特征之一。就好像我们学习处理混乱数据一样,因为这些数据服务的是更加广大的目标。毕竟混乱构成了世界的本质,也构成了人脑的本质,而去论是世界的混乱还是人脑的混乱,学会接受和应用他们才能得益。
参考文献
[1] 涂子沛.大数据.2013,4.
[2] 维克托·迈尔-舍恩伯格,肯尼思·库克耶.大数据时代.2013,1.
[3] Bill Franks.驾驭大数据.2013,1.