大数据时代带来了哪些时代大变革
扫描二维码
随时随地手机看文章
近来,“大数据时代”的来临己成为媒体关注的热门话题。大数据也似乎在一夜之间闯入了任何一个关于互联网未来的讨论,成为一个炙手可热无所不包的概念。最近刚结束的大连2013夏季达沃斯世界经济论坛还为“大数据时代” 的来临作了专题讨论。无论人们对此持有何种观点,但下列结论是共同的:“大数据时代”的来临己成为不争的事实,大数据作为一种新的资源,己对人们生活、企业商业活动以及政府公共管理带来了深远的变革。
大数据时代的来临,带给我们众多的冲击,每个人都应当与时俱进、不断提升,放弃残缺的守旧思想,大胆接受新的挑战。
什么是大数据?国际数据公司定义了大数据的四大特征:海量的数据规模(vast)、快速的数据流转和动态的数据体系(velocity)、多样的数据类型(variety)和巨大的数据价值(value)。仅从海量的数据规模来看,全球IP流量达到1EB所需的时间,在2001年需要1年,在2013年仅需1天,到2016年则仅需半天。全球新产生的数据年增40%,全球信息总量每两年就可翻番。
而根据2012年互联网络数据中心发布的《数字宇宙2020》报告,2011年全球数据总量已达到1.87ZB(1ZB=10万亿亿字节),如果把这些数据刻成DVD,排起来的长度相当于从地球到月亮之间一个来回的距离,并且数据以每两年翻一番的速度飞快增长。预计到2020年,全球数据总量将达到35~40ZB,10年间将增长20倍以上。
需要强调的是:所谓大数据并不仅仅是指海量数据,而更多的是指这些数据都是非结构化的、残缺的、无法用传统的方法进行处理的数据。也正是因为应用了大数据技术,美国谷歌公司才能比政府的公共卫生部门早两周时间预告2009 年甲型H1N1流感的暴发。
大数据的产生以及特点
当今世界大数据时代己经来临。什么是大数据?就像当今世界涌现出来的能描述大变局的概念一样,大都率先出现在欧美社会,进而传播到全世界。“大数据” 的概念出现与流行也是如此。
顾名思义,大数据就是大量的数据或者说海量的数据。现代社会从1941年诞生第一台电子计算机以来,信息技术得到空前迅猛地发展。这种发展的内在驱动力是将阳光下所有的事物都“数据化”。 目前,伴随着互联网Web2.0、物联网、手机、GPS和光电感应器等技术和硬件出现,数据如井喷一样大量涌现。有资料显示,1998年全球网民平均每月使用流量是1MB(兆字节),2000年是10MB,2008年是1GB(1GB等于1024MB),2014年将是10GB。我国网民数居世界之首,3G手机拥有者达4.2亿,每天产生的数据量居世界前列。
当然,仅仅从量的角度来理解大数据是远远不够的。麦肯锡全球研究所报告《大数据:创新、竞争和生产力的下一个前沿》对“大数据”的含义进行了界定:大数据是指大小超出了传统数据库软件工具的抓取、存储、管理和分析能力的数据群。对于这样一个定义,我们还可以从大数据4V特点加以理解。所谓4V(Volume 、Variety、 Velocity 、Value)是由描述大数据特性的四个英文词的字首字母所形成的:
一是数据量巨大(Volume),数据已从 TB 级别跃升至 PB 级别;
二是数据类型多样化(Variety),有网络数据、企事业单位数据、政府数据,网络数据又有媒体数据(比如社交网络、博客、微博等)、日志数据(比如搜索引擎,大家上网等等都会留下很多足迹)、还有富媒体数据(视频、音频等等),类型纷繁,已无规律可循,其中非结构化数据所占比例逐年增大;
三是密度低而价值大(Value),以视频为例,在连续不间断监控过程中,可能有用的数据也许只有一两秒,即所谓密度低,是对大量的数据通过“沙里淘金” 的数据挖掘,可是里面又藏着巨大的价值;
四是处理速度快(Velocity),及时分析对某些应用才更有意义,及时处理已经成为趋势之一,业内的“一秒定律”认为,各种处理必须在1秒钟内完成高速实时处理。
从大数据的本质上来说,“大数据”所代表的是当今社会所独有的一种新型的能力,通过对海量数据进行分析,获得有巨大价值的产品和服务,获取更深刻的洞察力。在大数据时代,数据已经成为一种新的经济资产类别,就像货币或黄金一样。