数据与大数据分析.pptx

文档介绍：BIG DATA
Contents
1
3
我们可以做些什么
2
实操分享
4
大数据,你从哪来
你是谁
中国网民数量:
半年增长率:%
中国注册网站数量:
手机网民:
占网民总数:%
月均网络交易:
16亿笔
每日新发微
博数量: 1亿+条
注册微博用户数:
发布的网页数量:866亿页
年增速:~40%
网络直播用户:
占网民总数:%
很多人还没搞清楚什么是PC互联网,移动互联来了;我们还没搞清楚移动互联的时候,大数据时代又来了!
——马云
数据爆炸式的增长
数据资产管理的挑战
需要更高性价比的数据计算与储存方式
需要不同的数据管理策略
01
你从哪里来?
***上发布98000+新微博
13000+个iPhone
应用下载
Skype上
37万+分钟的语音通话
上传6600张新照片到flickr
+条Email
YouTube上上传600+新视频
淘宝光棍节10680+个新订单
+条新状态
12306出票
1840+张
数据爆炸式的增长
数据资产管理的挑战
数据资产
B
数据资产管理
传统数据管理方式面临挑战
A
C
需要更高性价比的数据计算与储存方式
计算更快存储更省
10万
GB
10万
TB
1Byte = 8 Bit
1KB = 1,024 Bytes
1MB = 1,024 KB = 1,048,576 Bytes
1GB = 1,024 MB = 1,048,576 KB = 1,073,741,824 Bytes
1TB = 1,024 GB = 1,048,576 MB = 1,099,511,627,776 Bytes
1PB = 1,024 TB = 1,048,576 GB =1,125,899,906,842,624 Bytes
1EB = 1,024 PB = 1,048,576 TB = 1,152,921,504,606,846,976 Bytes
1ZB = 1,024 EB = 1,180,591,620,717,411,303,424 Bytes
1YB = 1,024 ZB = 1,208,925,819,614,629,174,706,176 Bytes
1Bity
1KB
1MB
1GB
1TB
1PB
1EB
1ZB
1YB
85%
半/非结构化的
Log / Web page / Email / PDF / Image / Full-text / MS-Office file
需要不同的数据管理策略
15%
结构化的 DB/DW
残缺
当我们想要扩充时,
才发觉:
架构只能 scale-up,
scale-out 不易
处理时间过长,
time-to-value 受限
成本过高,
cost-efficiency 受限
概念(Concept)
特征(Features)
变革(Change)
技术(Technology)
数据库(database)
大数据(bigdata)
你是什么?
02