论文部分内容阅读
摘 要：随着科学、技术和工程的迅猛发展，近20年来，许多领域（如光学观测、光学监控、健康医护、传感器、用户数据、互联网和金融公司以及供应链系统）都产生了海量的数据（更恰当的描述或许是“无限”的数据，大数据的概念也随之再次引起重视。
关键词：大数据；数据获取；数据传输；数据存储；数据分析
1 引言
近年来，“大数据”已广为人知，并被认为是信息时代的新“石油”，这主要基于两点共识。首先，在过去20年间，数据产生速度越来越快。据国际数据公司IDC报道，2011年产生和复制的数据量超过1.8Z字节，是过去5年数据增长的9倍，并将以每两年翻倍的速度增长。其次，大数据中隐藏着巨大的机会和价值，将给许多领域带来变革性的发展。因此，大数据研究领域吸引了产业界、政府和学术界的广泛关注。例如，产业界报告和公共媒体中充斥了大数据的相关信息；政府部门设立重大项目加速大数据的发展等期刊也发表了大数据挑战相关的论点。毫无疑问，大数据时代已经到来。
2 国外研究现状
早在2009年，联合国就启动了“全球脉动计划”，拟通过大数据推动落后地区的发展，而2012年1月的世界经济论坛年会也把“大数据，大影响”作为重要议题之一。在美国，2009年至今，Data.gov（美国政府数据库）全面开放了40万政府原始数据集，大数据已成为美国国家创新战略、国家安全战略以及国家信息网络安全战略的交叉领域和核心领域。2012年3月，美国政府提出“大数据研究和发展倡议”，发起全球开放政府数据运动，并投资2亿美元促进大数据核心技术研究和应用，涉及NSF，DARPA等6个政府部门和机构，把大数据放在重要的战略位置。英国政府也将大数据作为重点发展的科技领域，在发展8类高新技术的6亿英镑投资中，大数据的注资占三成。2014年7月，欧盟委员会也呼吁各成员国积极发展大数据，迎接“大数据”时代，并将采取具体措施发展大数据业务。例如建立大数据领域的公私合作关系；依托“地平线2020”科研规划，创建开放式数据孵化器；成立多个超级计算中心；在成员国创建数据处理设施网络。无疑，欧美等国家对大数据的探索和发展已走在世界前列，各国政府已将大数据发展提升至战略高度，大力促进大数据产业的发展。
3 国内研究现状
我国政府、学术界和产业界也早已经开始高度重视大数据的研究和应用的工作，并纷纷启动了相应的研究计划。挂一漏万，鉴于我们的了解所限，本文仅能够简要介绍其中的一些。
在政府层面，科技部“十二五”部署了关于物联网、云计算的相关专项。2012年，中国科学院院长白春礼院士呼吁中国应制定国家大数据战略。同年3月，科技部发布的《“十二五”国家科技计划信息技术领域2013年度备选项目征集指南》中的“先进计算”板块己明确提出“面向大数据的先进存储结构及关键技术”，国家“973计划”、“863计划”、国家自然科学基金等也分别设立了针对大数据的研究计划和专项。目前已立項“973计划”项目2项，“973计划”青年项目2项，国家自然科学基金重点项目2项。地方政府也对大数据战略高度重视，2013年上海市提出了《上海推进大数据研究与发展三年行动计划》，重庆市提出了《重庆市人民政府关于印发重庆市大数据行动计划的通知》，2014年广东省成立大数据管理局负责研究拟订并组织实施大数据战略、规划和政策措施，引导和推动大数据研究和应用工作。贵州、河南和承德等省市也都推出了各自的大数据发展规划。
在学术研究层面，国内许多高等院校和研究所开始成立大数据的研究机构。与此同时，国内有关大数据的学术组织和活动也纷纷成立和开展。2012年中国计算机学会和中国通信学会都成立了大数据专家委员会，教育部也在人民大学成立“萨师煊大数据分析与管理国际研究中心”。近年来开展了许多学术活动，主要包括：CCF大数据学术会议、中国大数据技术创新与创业大赛、大数据分析与管理国际研讨会、大数据科学与工程国际学术研讨会、中国大数据技术大会和中国国际大数据大会等。
在产业层面，国内不少知名企业或组织也成立了大数据产品团队和实验室，力争在大数据产业竞争中占据领先地位。
参考文献
[1]Gantz J，Reinsel D. Extracting value from chaos. IDC iView，2011： 1-12.
[2]Manyika J，Chui M，Brown B，et al. Big data： the next frontier for innovation，competition，and productivity.McKinsey Global Institute，2011.
[3]Cukier K. Data，data everywhere. Economist，2010，394：3-16.
[4]Lohr S. The age of big data. New York Times，2012，11.
[5]Noguchi Y. Following digital breadcrumbs to big data gold. National Public Radio，2011.
[6]Noguchi Y. The search for analysts to make sense of big data. National Public Radio，2011.
[7]White House. Fact Sheet： Big Data Across the Federal Government. Office of Science and Technology Policy，2012.
[8]Howard J H，Kazar M L，Menees S G，et al. Scale and performance in a distributed file system. ACM Trans ComputSyst，1988，6：51-81.
关键词：大数据；数据获取；数据传输；数据存储；数据分析
1 引言
近年来，“大数据”已广为人知，并被认为是信息时代的新“石油”，这主要基于两点共识。首先，在过去20年间，数据产生速度越来越快。据国际数据公司IDC报道，2011年产生和复制的数据量超过1.8Z字节，是过去5年数据增长的9倍，并将以每两年翻倍的速度增长。其次，大数据中隐藏着巨大的机会和价值，将给许多领域带来变革性的发展。因此，大数据研究领域吸引了产业界、政府和学术界的广泛关注。例如，产业界报告和公共媒体中充斥了大数据的相关信息；政府部门设立重大项目加速大数据的发展等期刊也发表了大数据挑战相关的论点。毫无疑问，大数据时代已经到来。
2 国外研究现状
早在2009年，联合国就启动了“全球脉动计划”，拟通过大数据推动落后地区的发展，而2012年1月的世界经济论坛年会也把“大数据，大影响”作为重要议题之一。在美国，2009年至今，Data.gov（美国政府数据库）全面开放了40万政府原始数据集，大数据已成为美国国家创新战略、国家安全战略以及国家信息网络安全战略的交叉领域和核心领域。2012年3月，美国政府提出“大数据研究和发展倡议”，发起全球开放政府数据运动，并投资2亿美元促进大数据核心技术研究和应用，涉及NSF，DARPA等6个政府部门和机构，把大数据放在重要的战略位置。英国政府也将大数据作为重点发展的科技领域，在发展8类高新技术的6亿英镑投资中，大数据的注资占三成。2014年7月，欧盟委员会也呼吁各成员国积极发展大数据，迎接“大数据”时代，并将采取具体措施发展大数据业务。例如建立大数据领域的公私合作关系；依托“地平线2020”科研规划，创建开放式数据孵化器；成立多个超级计算中心；在成员国创建数据处理设施网络。无疑，欧美等国家对大数据的探索和发展已走在世界前列，各国政府已将大数据发展提升至战略高度，大力促进大数据产业的发展。
3 国内研究现状
我国政府、学术界和产业界也早已经开始高度重视大数据的研究和应用的工作，并纷纷启动了相应的研究计划。挂一漏万，鉴于我们的了解所限，本文仅能够简要介绍其中的一些。
在政府层面，科技部“十二五”部署了关于物联网、云计算的相关专项。2012年，中国科学院院长白春礼院士呼吁中国应制定国家大数据战略。同年3月，科技部发布的《“十二五”国家科技计划信息技术领域2013年度备选项目征集指南》中的“先进计算”板块己明确提出“面向大数据的先进存储结构及关键技术”，国家“973计划”、“863计划”、国家自然科学基金等也分别设立了针对大数据的研究计划和专项。目前已立項“973计划”项目2项，“973计划”青年项目2项，国家自然科学基金重点项目2项。地方政府也对大数据战略高度重视，2013年上海市提出了《上海推进大数据研究与发展三年行动计划》，重庆市提出了《重庆市人民政府关于印发重庆市大数据行动计划的通知》，2014年广东省成立大数据管理局负责研究拟订并组织实施大数据战略、规划和政策措施，引导和推动大数据研究和应用工作。贵州、河南和承德等省市也都推出了各自的大数据发展规划。
在学术研究层面，国内许多高等院校和研究所开始成立大数据的研究机构。与此同时，国内有关大数据的学术组织和活动也纷纷成立和开展。2012年中国计算机学会和中国通信学会都成立了大数据专家委员会，教育部也在人民大学成立“萨师煊大数据分析与管理国际研究中心”。近年来开展了许多学术活动，主要包括：CCF大数据学术会议、中国大数据技术创新与创业大赛、大数据分析与管理国际研讨会、大数据科学与工程国际学术研讨会、中国大数据技术大会和中国国际大数据大会等。
在产业层面，国内不少知名企业或组织也成立了大数据产品团队和实验室，力争在大数据产业竞争中占据领先地位。
参考文献
[1]Gantz J，Reinsel D. Extracting value from chaos. IDC iView，2011： 1-12.
[2]Manyika J，Chui M，Brown B，et al. Big data： the next frontier for innovation，competition，and productivity.McKinsey Global Institute，2011.
[3]Cukier K. Data，data everywhere. Economist，2010，394：3-16.
[4]Lohr S. The age of big data. New York Times，2012，11.
[5]Noguchi Y. Following digital breadcrumbs to big data gold. National Public Radio，2011.
[6]Noguchi Y. The search for analysts to make sense of big data. National Public Radio，2011.
[7]White House. Fact Sheet： Big Data Across the Federal Government. Office of Science and Technology Policy，2012.
[8]Howard J H，Kazar M L，Menees S G，et al. Scale and performance in a distributed file system. ACM Trans ComputSyst，1988，6：51-81.