文档介绍：大数据
21:18
PAGE DIRECTORY
目录
大数据的产生
01
大数据技术及分析
02
企业大数据
03
大数据应用案例
04
讲述内容
21:18
个人的看法
04
childjumphip
01
第一部份
大数据的产生
★大数据的产生缘由
★大数据的特征
★大数据产业(链)
Cause of Big Data
21:18
大数据的产生——大数据的产生缘由
各行各业大数据每天都在产生…
我国网民数量()居世界之首,每天产生的数据量位居世界前列
某宝网站
-单日数据产生量超5万GB
-存储量4000万GB
-目前数据总量10亿GB
-存储网页1万亿页
-每天约60亿次搜索请求
百度公司
城市监控
医院
-
-每月产生数据上千万GB
-每个病人的CT影像达几十GB
-全国每年保存的数据达上百亿GB
新的数据来源/新的数据采集方法
-互联网(社交网络、电子商务等)
-物联网(传感器、二维码、RFID、无线射频识别、位置信息等)
全时空数据的可采集性
智能算法的使能
非结构的数据形态
-图片、视频、音乐
-商务智能(BI)
-人工智能(AI)
而数据获取成本、存储成本和处理成本的下降,也推动了数据量的膨胀。
1
实时分析:流信息、即时需求
Velocity(速度)
2
海量数据:超规模、数字化生活、数据商务。
Volume(大量)
3
低价值密度:大量的不相关信息、需深度分析
Value(价值)
4
多源异构性:不同形式(文本、图形、视频数据)、无模式或者模式不明显、不连贯语法和句义。
Variety(多样)
大数据的产生——大数据的特征
大数据的产生——大数据产业(链)
大数据的产业是哪些?
如交易数据、交互数据、传感数据。
当前我国大数据处于起步发展阶段,各地积极性高,市场增速明显。2014年,,存在结构发展不均衡等特点。
大数据产业链主要包括以下4个环节:
大数据生产与集聚
大数据组织与管理
大数据分析与发现
大数据应用服务
如开展分布式文件系统、分布式计算系统、数据库、数据仓储、MOLAP、HOLAP、数据转换工具、数据安全等。
如数据挖掘、数据统计、基于大数据的业务分析与预测、基于大数据的决策、商业智能、人工智能、数据可视化等。
如数据运营、大数据交易、分析与预测服务、决策支持服务、数据分享平台、数据分析平台等。
大数据IT基础设施:存储设备、运算设备、一体机、操作系统、基础软件、IT支撑等。
childjumphip
02
第二部份
大数据技术及分析
Big Data Technology
★大数据的技术(例)
★大数据的分析方法(例)
21:18
大数据技术及分析——大数据的技术(例)
基于Cookie信息的互联网精准广告定向技术
Cookies是一种能够让网站服务器把少量数据储存到客户端的硬盘或内存,或是从客户端的硬盘读取数据的一种技术。Cookies是当你浏览某网站时,由Web服务器置于你硬盘上的一个非常小的文本文件,它可以记录你的用户ID、密码、浏览过的网页、停留的时间等信息。
定向技术指的是依托于搜索引擎庞大的网民行为数据库,对网民几乎所有上网行为进行个性化的深度分析,按广告主需求锁定目标受众,进行一对一传播,提供多通道投放,按照效果付费。而用户追踪技术的基础就是Cookie。
这只是大数据获取及应用的一小技术,大数据运用到的技术还有很多,包括有大数据采集—大数据预处理—大数据存储及管理—大数据分析及挖掘—大数据展现和应用(检索、可视化、安全等)各环节下的技术。
大数据技术及分析——大数据的分析方法(例)
大数据分析方法:回归分析、聚类分析、网络分析、关联分析….
关联分析
确定型关系。***牌表演,表面看似随机实际只需记忆不动点即可。
啤酒与尿布溺水事件与雪糕销量非因果关系隐藏共因
不确定关系。双色球,不确定型推理做不出精准,非必然的、随机的
“王”“宝”“强”,餐饮促销。
childjumphip
03
第三部份
企业大数据
Enterprise Data
★企业大数据有哪些
★大数据对企业的作用
★企业产品规划
21:18