文档介绍：大数据时代
生活、工作与思维的大变革
作者:[英]维克托· 迈尔-舍恩伯格肯尼思· 库克耶
译者:盛劳燕周涛
出版:浙江人民出版社
制作:@天天向Qian前
大数据时代
之拥抱
《大数据时代》读书笔记
制作:@天天向Qian前
身处
大数据时代
!
我们已经处在大数据时代,可能还浑然不知
事件一:变革公共卫生
事件
2009年,H1N1流感预测
对手
谷歌
疾控中心
武器
分析搜索记录
医院报告
结果
谷哥提前两周得到结果
与官方数据相关性达97%
维克托教授将带我们一窥大数据时代的全景
事件二:变革商业
事件
机票价格预测
人物
埃齐奥尼的Farecast系统
武器
分析大量价格记录
结果
票价预测准确度达75%
平均每张机票节省50美元
时间就是生命!
省钱是硬道理!
大数据时代
之拥抱
处理数据理念的思维变革
挖掘数据价值的商业变革
面对数据风险的管理变革
维克托教授认为大数据时代要关注:
3
大
重要
变革
01
02
03
大数据还是改变市场、组织机构,以及政府与公民关系的方法
大数据是人们获得新的认知、创造新的价值的源泉
《大数据时代》读书笔记
制作:@天天向Qian前
大数据时代
之拥抱
首先就要
转变处理数据的理念
处理数据理念的思维变革
01
云计算能便宜、有效、高速地的对信息存储、分享和挖掘
采样分析是信息缺乏时代和信息流通受限制时代的产物
《大数据时代》读书笔记
制作:@天天向Qian前
大数据时代
的思维变革
01
更多
而是全体数据
不是随机样本
大数据时代
收集与分析全体数据是可行和便宜的
小数据时代
受制于技术只能收集与分析随机样本
大数据是指不用随机分析法这样的捷径,而是采用所有数据的方法。
大数据中的“大”非绝对意义的大,指全体数据,有时并非真的“大”。
穿孔卡片与美国人口普查
大数据与乔布斯的癌症治疗
Xoom与跨境汇款异常交易报警
巴拉巴西与第一次全社会层面的网络分析
本章的例子
《大数据时代》读书笔记
制作:@天天向Qian前
大数据时代
的思维变革
02
更杂
而是混杂性
不是精确性
大数据时代
追求大量数据,允许不精确的数据
小数据时代
因信息量少,对数据精确性更苛刻
随着数据量的增加,数据错误率也增加,格式也存在不一致
只有5%的数据是结构化且适用传统统计方法,95%的数据是非结构化。
只有接受不精确性才能利用这些大量的数据。
微软与语料库数据添加
无所不包的谷歌翻译系统
IBM Candidate计算机翻译项目
英国石油公司与无线感应器
麻省理工与通货紧缩预测软件
Hadoop 与VISA的13分钟
《大数据时代》读书笔记
制作:@天天向Qian前
本章的例子
大数据时代
的思维变革
03
更好
而是相关关系
不是因果关系
大数据时代
相关关系大放异彩
小数据时代
相关关系是有用的
大数据的核心:建立在相关关系分析基础上的预测。
相关关系是:A与B经常一起发生。只要注意到B发生,就能预测A的发生。
沃尔玛把蛋挞与飓风用品摆一起
FICO能预测个人的行为
UPS与汽车修理预测
大数据预测早产儿病情
美国折扣零售商塔吉特与怀孕预测
幸福感的非线性关系
二手车质量预测
纽约大型沙井盖爆炸预测
《大数据时代》读书笔记
制作:@天天向Qian前
本章的例子
大数据时代
之拥抱
其次就要
转变数据价值的获取方式
挖掘数据价值的商业变革
02
大数据时代的重要价值在数据深挖掘
数据的价值来源于万物数据化和数据交叉复用
《大数据时代》读书笔记
制作:@天天向Qian前
大数据时代
的商业变革
01
数据化
数据交叉复用
一切皆可量化
变革的基础
一切事物都可量化,变为数据
变革的重点
由T(技术)转变到I(信息)上
数字化:模拟数据转换成用“0”和“1”表示的二进制码。例:书页的扫描,无法检索内容
数据化:把一种现象转换为可制表分析的量化形式的过程。例:书变成数据化文本,可检索
《大数据时代》读书笔记
制作:@天天向Qian前
本章的例子
日本的坐姿研究与汽车防盗系统
多效地理定位与UPS的最佳行车路径
谷歌的数字图书馆
Foursquare,让用户推荐喜爱的地方
用手机数据预测疾病传播和城市繁荣
用微博数据预测股市投资时机
睡眠活动数据库与睡眠模式预测
GPS感应器,判断环境因素对哮喘病的影响
大数据时代
的商业变革
02
价值
之不竭的创新
取之不尽,用
真实价值
隐藏在冰山之下
数据价值
不