文档介绍:“大数据时代”给当今世界带来的变革与挑战
“大数据时代”给当今世界带来的变革与挑战
近来,“大数据时代”的来临己成为媒体关注的热门话题。大数据也似乎在一夜之间闯入了任何一个关于互联网未来的讨论,成为一个炙手可热无所不包的概念。最近刚结束的大连2013夏季达沃斯世界经济论坛还为“大数据时代”的来临作了专题讨论。无论人们对此持有何种观点,但下列结论是共同的:“大数据时代”的来临己成为不争的事实,大数据作为一种新的资源,己对人们生活、企业商业活动以及政府公共管理带来了深远的变革。
一、大数据的产生以及特点
当今世界大数据时代己经来临。什么是大数据?就像当今世界涌现出来的能描述大变局的概念一样,大都率先出现在欧美社会,进而传播到全世界。“大数据”的概念出现与流行也是如此。2010年2月出版的《经济学家》杂志中一篇题为“The data deluge”的文章,被认为是“大数据”概念的发端。deluge一词比较生癖, 翻译过来是“大泛滥、大洪水、大量”之意,文章的标题应直译为“数据洪流”或“海量数据”。从文章讨论的内容来看,和今天流行起来“大数据”是差不多的,只是没有用“大数据”这一概念。2011年5月麦肯锡全球研究院发表了一篇名为“Big data: The next frontier for petivity and productivity”( 大数据:未未创新、竞争和生产力的下一个前沿)的研究报告。这篇报告无论在IT界,还是经济界、学术界和公共管理部门,都极具影响力。“Big data”亦即“大数据”这个关键词就开始出现并愈来愈广泛流行。
顾名思义,大数据就是大量的数据或者说海量的数据。现代社会从1941年诞生第一台电子计算机以来,信息技术得到空前迅猛地发展。这种发展的内在驱动力是将阳光下所有的事物都“数据化”。目前,、物联网、手机、GPS和光电感应器等技术和硬件出现,数据如井喷一样大量涌现。有资料显示,1998年全球网民平均每月使用流量是1MB(兆字节),2000年是10MB,2008年是1GB(1GB等于1024MB),2014年将是10GB。我国网民数居世界之首,,每天产生的数据量居世界前列。
当然,仅仅从量的角度来理解大数据是远远不够的。麦肯锡全球研究所报告《大数据:创新、竞争和生产力的下一个前沿》对“大数据”的含义进行了界定:大数据是指大小超出了传统数据库软件工具的抓取、存储、管理和分析能力的数据群。对于这样一个定义,我们还可以从大数据4V特点加以理解。所谓4V(Volume 、Variety、 Velocity 、Value)是由描述大数据特性的四个英文词的字首字母所形成的:一是数据量巨大(Volume),数据已从 TB 级别跃升至 PB 级别;二是数据类型多样化(Variety),有网络数据、企事业单位数据、政府数据,网络数据又有媒体数据(比如社交网络、博客、微博等)、日志数据(比如搜索引擎,大家上网等等都会留下很多足迹)、还有富媒体数据(视频、音频等等),类型纷繁,已无规律可循,其中非结构化数据所占比例逐年增大;三是密度低而价值大(Value),以视频为例,在连续不间断监控过程中,可能有用的数据也许只有一两秒,即所谓密度低,是对大量的数据通过“沙里淘金”的数据挖掘,可是