大数据处理的背景.pdf

文档介绍：大数据处理背景
提纲
什么是大数据
大数据的特点
案例简介
大数据生态系统
什么是大数据
海量数据时代正在到来
移动网络和各种智能终端
社交网络
(Facebook,
传感器、导航终端等非传统
微博等
视频
)
(
医疗影像、地理信息、监控录像等
统计、分析、预测
IT
设备
其他
)
什么是大数据
大数据:
什么是大数据指数据集的大小超过了现有典型的数据库软件和工具的处理能
力的数据。与此同时,与及时捕捉、存储、聚合、管理这些大数据以及
对数据的深度分析的新技术和新能力,正在快速增长。
大数据的特点
KB 》 MB 》 GB 》 TB 》 PB 》 EB 》 ZB 》 YB 1024
案例简介
小
大数据生态系小
统小小小小小小小小小
小
小小
小小
大小
小
大数据的特点
大数据特点
什么是大数据
传统数据大数据
大数据的特点数据量 GB->TB TB->PB以上
增长速度数据量稳定持续、事实生产数据
案例简介
年增长率超过60%
多样化结构化数据为主非结构化、半结构化
大数据生态系
统价值统计和报表预测性分析、数据挖掘
等
•其他特征
数据来自大量源,需要做相关性分析
需要实时或者准实时的流式采集,有些应用90%%读
数据需要长时间存储,非热点数据也会被随机访问
大数据特点
什么是大数据
传统大数据
大数据的特点
扩展性纵向扩展横向扩展
案例简介
计算和存
资源集中
大数据生态系分布式储分布
统
可用性单份数据数据复制
大数据特点
什么是大数据
传统大数据
扩展性纵向扩展横向扩展
大数据的特点计算和存
资源集中
分布式储分布
可用性单份数据数据复制
案例简介
大数据生态系
统