文档介绍：阿里巴巴大数据实践
提纲
大数据的几个问题
本质、目标、核心、挑战
阿里巴巴大数据实践
大数据路径
典型应用示例
提纲
大数据的几个问题
本质、目标、核心、挑战
阿里云的大数据实践
大数据路径
典型应用示例
大数据的本质
大数据的本质在于数据都在线、可以共享
大数据不仅仅在于大,欧洲对撞实验室做一次碰撞的数据产生的数据非常大
今天的数据不是大,数据都在线成为互联网的特点
大数据的本质
大数据的本质在于数据都在线、可以共享
在线远远比“大”更反映本质,写在磁带、写在纸上的数据,远没有在线数据有价值
淘宝数据:反映了商品属性、交易、仓储、物流等,对于做金融、物流、仓储和个性化制造带来巨大的变化
大数据的本质
大数据的本质在于数据都在线、可以共享
在线让数据收集变得很容易
比如:美国总统选举预测
历史上都是采用:盖洛普调查
现在利用在***上分析每个人发的东西,都可以直接分析
大数据的目标
大数据的目标在于做以前做不到的事情,而不在于改进现有业务
数据真正了不起的地方,是靠小的成本,去产生有价值的东西
今天的银行都不会说靠大数据做起来的公司。银行靠什么处理数据:IOE。处理数据产生的价值,可能都无法抹平处理数据的成本。
大数据的目标
大数据的目标在于做以前做不到的事情,而不在于改进现有业务
亚马逊通过访问数据分析做成了全球做好的推荐业务,这可以算是大数据的早期应用
阿里金融做小贷的事情,恰恰是银行做不了的。银行做信用评级的成本极高,银行不做小的贷款。
阿里金融每天贷10块钱,100块钱的人也很多
大数据的核心
大数据的核心在于建立数据之间的整合和关联分析
Google的搜索:一个关键字就能够把我们想得到的文档通过列表的形式给展示出来
淘宝的销售、物流、仓储和制造
大数据的挑战
大数据的挑战在于有了大数据,你能不能及时、正确的算出来
PB级的数据,流式数据和多种数据的融合需要在一定的时间内(小时、天等)完成,成本可控
数千台集群、多个任务的同时分布处理
流式计算和支持任意维度分析的即时计算
分布式的大规模数据的存储