文档介绍:大数据发展概况
1
sfsf
内容提要
一、概念
2
sfsf
什么大数据?
1、概念
泛指信息数据经过积累达到一定程度以后,现有的信息系统、软件平台、存储体系难以对这些数据进行撷取、管理、处理、分析利用,这样的数据集合称为大数据。
3
sfsf
2、大数据的4V特点:
容量大(Volume):
种类多(Variety):
产生快(Velocity):
价值大(Value):
4
sfsf
1、从“概念”走向“价值”
大数据发展状况
(1)大数据向更多新领域扩张。有更多领域开始有意识地收集和积累大数据,并从中挖掘以前不曾触及的新价值,从而使该领域产生重大变化;
(2)更多数据驱动的商业模式。指除了广告和电商两种已有的数据驱动应用的商业模式之外,互联网、金融等将会成为大数据应用的新型商业模式,特别是基于海量数据的信用体系和风险控制;
(3)资本高度关注。指资本将高度关注大数据领域,相关的融资、并购、首次公开募股(IPO)将会纷纷出现。
5
sfsf
从2012年开始,很多应用领域都在讲大数据的概念,比如金融大数据、安全大数据、制造业大数据、物流大数据等等,并且正在逐渐落实大数据的价值,开始探索大数据驱动的业务模式。
6
sfsf
2、大数据处理架构的多样化
(1)大数据处理多样化模式并存融合。意味着Hadoop/MapReduce框架一统天下的模式将被打破,实时流计算、分布式内存计算、图计算框架等将与之并存;
7
sfsf
(2)大数据存储与管理。意味着尽管分布式文件系统、数据索引与查询技术、查询语言、实时/流式数据存储管理等都不是新问题,但大数据体量大、速度快、模态多等特性带来的挑战终将引起大数据存储与管理的质变;
(3)内存计算成为提高处理性能的主要手段。这意味着大数据的实时处理需求迫切。同时,内存价格将不断降低,内存计算将成为解决实时性大数据处理问题的主要手段。
8
sfsf
大数据的应用需求多种多用,而相关技术还远远没有达到成熟和稳定的程度,在2014年乃至之后的几年内,不太可能存在可以“一统天下”的大数据系统架构。我们会持续看到更多丰富多彩的、创新引领突破的技术架构与应用模式。
9
sfsf
3、大数据安全与隐私
大数据安全和个人隐私问题凸显。
(1)大数据安全。相对于传统的数据模式,大数据更容易成为网络攻击的目标,大数据分析技术也更容易被黑客利用。如今的网络和数字化生活使得犯罪分子、网络黑客以及并无恶意的大数据服务提供商可轻易获得用户的有关信息,而且犯罪分子的犯罪手段也变得更多、更高明且更加不易被追踪和防范。
(2)大数据个人数据保护和隐私立法。同时,用户的隐私越来越多地融入到各种大数据中,各种数据来源之间的无缝对接以及越来越精准的数据挖掘技术,使得大数据拥有者能够掌控越来越多的用户信息。
10
sfsf