2013年被称为“大数据元年”,因为在这一年里“大数据(Big Data)”已成为一个炙手可热的名词,随着互联网和信息行业的发展,大数据是继云计算、物联网之后信息技术领域的又一次颠覆性变革。大数据有多“大”?大数据是指那些已经超出了传统数据的尺度,一般的技术与工具难以获取、存储、管理和分析的海量数据。这里,超出传统数据尺度的海量数据,也即“大”,并不需要给出普遍适用的定义。因为随着技术进步,这个尺寸本身还在不断增大,对于不同的领域而言,“大”的定义也是不同的。大数据具有规模性(Volume)、多样性(Variety)、实时性(Velocity)、价值性(Value)的“4V”特征,被视为“未来的新石油”.
通过大数据的交换、整合、分析,新的知识、新的规律将被发现,新的意义、新的价值将被产生。
1、大数据发展已上升为国家战略
今天,对信息资源的开发利用能力已经成为国际竞争以及国家整体实力的重要方面,当全球范围内数据成为国家资产、创新前沿,要成为“数据时代先驱者”时,我们需要学习,借鉴、消化和创新。在国家层面建立大数据国家战略,强化对于基础设施的投入,推动政府数据公开,建立数据流通平台,加强法律环境建设,通过产业推进和详细规划,引导和推动各行业对大数据的研究与利用,推动各领域大数据落地,养成大数据时代的管理创新思维,实现数据治国,数据强国。
2012年3月,美国白宫科技政策办公室发布了《大数据研究和发展计划》,宣布将投资2亿多美元,用以大力推进大数据的收集、访问、组织和开发利用等相关技术的发展,进而大幅提高从海量复杂的数据中提炼信息和获取知识的能力和水平,此举标志着美国把大数据提高到了国家战略层面。这是继1993年9月美国政府启动“信息高速公路”计划后,国家层面在信息领域的再一次狂猛发力。作为大数据的策源地和创新的引领者,美国发展大数据的决心和势头将加剧各国对于大数据资源的争夺。
作为大数据的积极拥抱者,英国于2013年1月宣布,将注资6亿英镑(约9.12亿美元)发展8类高新技术,其中,1.89亿英镑用来发展大数据技术。此外,英国政府在2013年8月发布的《英国农业技术战略》中指出,英国今后对农业技术的投资将集中在大数据上,目标是将英国的农业科技商业化。
在法国,2013年2月发布的《数字化路线图》列出了5项将会大力支持的战略性高新技术,其中一项就是大数据。
同年4月,法国经济、财政和工业部宣布,将投入1150万欧元用于支持7个未来投资项目,目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展。”
日本政府对于大数据的发展也是雄心勃勃。2013年6月,日本内阁正式公布了新IT战略--“创建最尖端IT国家宣言”,“宣言”全面阐述了2013~2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略,提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”.
2013年8月,澳大利亚政府信息管理办公室发布了公共服务大数据战略。该战略将以“数据属于国有资产,从设计着手保护隐私,数据完整性与程序透明度,技巧、资源共享,与业界和学界合作,强化开放数据”等六条大数据原则为支撑,旨在推动公共行业利用大数据分析进行服务改革,制定更好的公共政策,保护公民隐私,使澳大利亚在该领域跻身全球领先水平。预计这六条原则将极大地提高生产力及创新收益,并协助政府解决各种难题。
除了美国、英国、法国、澳大利亚等国家建立了大数据国家战略外,德国、俄罗斯、韩国等国家也表明在未来几年内将大力发展信息技术产业,主要包括创建创新研发中心、建设IT基础设施等,此外,还将通过带宽建设和制定数据保护法案为大数据的发展提供前提条件。
在中国,虽然大数据还未上升到国家战略层面,但是相关领导人、研究机构、各领域企业对于大数据的关注、探索正在不断升温,而且众多专家和学者也在呼吁,政府应顺应信息技术发展趋势,抓住大数据带来的生产效率提升和经济社会运行成本降低的战略机遇,研究大数据发展趋势,将大数据战略上升为国家战略。
2、企业和政府共推大数据发展
大数据的发展除了需要政府在政策层面上的支持,各个机构和企业对于技术的研究、革新、创造同样不可或缺。再加上大数据的应用适合于各行各业,各国政府、企业、机构都表现出巨大的积极性。
在美国,其大数据的发展之所以走在世界前列,除了国家政策的大力支持,与硅谷精神和创新力量在大数据发展方面的作用是分不开的,一大批领军企业,包括谷歌、微软、EMC、SAP这样的巨头,也包括像Facebook、Splunk、Teradata这些创新的公司,都在积极推动着各项大数据技术、方案走向成熟。
在法国,大数据的发展也随智慧城市的建设节节升高。法国电信、施耐德集团和达索集团等诸多法国知名企业在智慧城市建设方面投入了大量的精力,纷纷在旗下设立了专门从事智慧城市设计和研发的工作室或实验室,而大数据技术的研究和利用作为智慧城市建设的重要组成部分,其基础设施、研究理论都得到了进一步的发展。此外,法国重要的运营商(比如Orange France Telecom或者Atos)在法国和其他国家都在经营数据中心,而一些数据领域的大型国际公司都在法国从事业务,年营业额约达10亿欧元,极大提高了法国在大数据发展领域的竞争力。
在亚洲地区,日本的日立、松下、富士通、丰田等科技和制造企业通过多年的积累和优势,对于大数据应用的创新和开发也是走在全球前列。据相关调查显示,在日本,大约六成以上的企业目前正在积极考虑活用大数据,预计到2016年,这个数量将增加一倍。韩国方面,像LGCNS这样的企业在数据中心建设方面颇有建树,LGCNS总共拥有4个不同的数据中心,它们分别设立在仁川、首尔和釜山,其新建的位于釜山的全球云数据中心占地32321平方米,拥有72000台服务器。据悉,韩国数据中心不仅可供自用,对亚洲相邻国家具有很强的吸引力,比如日立制作所就提出将利用韩国LG集团的数据中心设施,为在韩日企提供云服务。
在中国,百度、新浪、阿里等互联网巨头积极投身大数据,试图获取和整合更多的用户行为数据,增强自己挖掘、分析数据的能力,同时利用大数据开发出新的产品和服务以获取更多的用户黏度和经济价值。在IT168联合ITPUB、China Unix展开的一项有关大数据应用与趋势的专项调查中指出,国内目前已经部署大数据应用的企业所占比例达到21.89%,计划1年内部署的企业占27.92%,计划2年内部署的企业占14.34%.而另一方面,IBM、甲骨文、微软等国际IT巨头也早将矛头瞄准了中国的大数据市场,利用自身在大数据领域的优势推出了针对性的产品和服务。
各企业在大数据市场的争夺,在加剧竞争的同时也将进一步促进国内大数据基础设施以及相关软件设备的革新和进步。
3、数据共享与数据保护成共存之势
与传统数据相比,大数据的资源性特征尤为突出,成为各国重视开发大数据的依据。在移动网络、云计算和其他技术的支持下,大数据迅猛发展,分析数据的技术不断创新,第二次数据革命悄然发生。
大数据分析作为大数据应用的灵魂,其最大的特点就是对海量的、全集的数据的分析,从这方面来看,各国数据开放将是大数据发展的一个必然趋势。但是另一方面,数据安全问题也备受各国关注,尤其是“棱镜门”事件已经给各国上了深刻的一课,除此之外,数据开放所引发的个人信息泄露、隐私曝光等所带来的社会危害也坚定了各国开始建立数据保护防线的决心。因为国情不同,各国开放的数据范围、数量不同,数据保护的重点、重视程度也有所区别,但是数据开放与数据保护之间的平衡已成为各国大数据发展共同面临的课题。
以美国为例。美国作为OpenDate(数据开放)运动的支持者和先行者,其最重要的数据开放平台是奥巴马政府在2009年推出的Data.gov,Data.gov是美国“开放政府”承诺的关键部分。美国政府提出,数据是一项有价值的国家资本,应对公众开放,而不是把其禁锢在政府体制内。
而在数据安全方面,美国一直高度重视,其中信息安全已经列为国家安全战略最重要的组成部分之一,此外,关于个人隐私、信息安全等内容的法规体系建设也是走在世界前列。
大数据与任何一项新技术一样,在推动社会变革的同时也造成了社会风险,关于大数据发展过程中数据开放与数据保护之间的矛盾是无法避免的,但是可以通过技术手段和法律法规政策进行平衡,比如规范数据开放、制定大数据的技术标准和运营标准、启动大数据立法等,以实现大数据应用的良性发展。
面对大数据,世界强国已相应做出了战略层面的研究和布局。在2013年“大数据元年”之后,面对新的挑战,我们需从观念上提升对大数据的认识,聚拢力量,加强大数据建设的宏观部署和统筹发展,以大数据建设提升我国的信息化建设水平。从大数据这条新的起跑线,牵引、拉动我国信息化建设向更高层次发展。