文档介绍：云计算与大数据
第1章 绪 论
云计算的来历及发展
云计算的概念及特征
云计算的应用及比较
大数据的提出及发展
大数据的概念及特征
大数据的作用与件将会越来越多地借助互联网的强大功能，更多的软件将在在互联网上直接为用户提供服务，这将给软件开发者（无论企业还是个人）带来他们的黄金时代。
云计算的应用范围
不是所有的软件都需要搬到云计算中。云计算也不是对每个开发商都适合。对计算资源需求不大，所需资源没有大起大落的网上软件，从目前来说，云计算并不能带来特别的好处。
云计算与一般托管环境的区别
云计算与网格计算的区别
云计算系统与传统超级计算机的区别
大数据的提出
大数据一词源于英文的“Big Data”，早在1980年，著名未来学家阿尔文·托夫勒的《第三次浪潮》一书中，就出现过大数据的表述。
但如果要追溯“大数据”的最初出处，就必然要提及Apache org的开源项目Nutch。当时大数据的意思是更新网络搜索索引，同时还需要批量处理和分析大量的数据集。谷歌的Map Reduce和Google File System(GFS)发布后，大数据的含义中除了涵盖大量数据之外，还包括数据处理的速度。
大数据的提出与发展
大数据的发展
什么是大数据？
对于“大数据”（Big data）研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
大数据的概念、特征及挑战
什么是大数据？
麦肯锡全球研究所的《大数据：创新、竞争和生产力的下一个前沿》报告中对“大数据”的定义是：大数据通常指的是大小规格超越传统数据库软件工具抓取、存储、管理和分析能力的数据群。但这个定义中没有说明什么样规格的数据才是大数据。
什么是大数据？
按照美国信息存储资讯科技公司易安信（EMC）的界定，特指的大数据一定是指大型数据集，规模大概在10TB。通过多用户将多个数据集集合在一起，能构成PB的数据集。
关于大数据如何定义尚没有一个统一的意见，结合大数据的四个特征，可以给出一个较为清晰的大数据概念。
大数据的特征
大数据特征可概括为四个V：
大量化（Volume）
多样化（Variety）
快速化（Velocity）
价值（Value）
关于大数据第4个V特征的另一种观点：
在普遍认同大数据的数据体量(volumes)大，数据类
别(variety)多，产生速度快，要求数据处理速度（
Velocity）快的3V特征后，关于最后一个特征的另
一种观点是：第4个V指数据真实性（Veracity）要
求高，随着社交数据、企业内容、交易与应用数据
等新数据源的兴趣，传统数据源的局限被打破，企
业愈发需要有效的信息之力以确保其真实性及安全
性。
结构化和非结构化数据
按数据结构，数据分为结构化数据、半结构
化的非结构化数据和无结构的非结构化数。
结构化数据
一般是指可以存储在数据库中，用二维表结
构来逻辑表达实现的数据。如表1-1所示。
客户号
客户姓名
商品单价
商品名称
商品数量
2014111001
汪伟
冰箱
1
2015120602
李萍
电磁炉
1
非结构化数据
相对于结构化数据，一般将不方便用二维表结构来表现的数
据即称为非结构化数据，包括：
半结构化数据
介于完全结构化数据和完全无结构化数据之间的数据，半结
构化数据格式较规范，一般是纯文本数据，可以通过某种方
式解析得到每项数据。最常见的是日志数据、XML、JSON
等格式数据。
无结构化数据
指非纯文本类数据，没有标准格式，无法直接解析出相应的
值。常见的有富文本文档（Rich Text Format，简称RTF）
、多媒体（图像、声音、视频等）。
大数据的作用
1. 大数据对企业影响深远
2. 大数据是一种新商品
3．精准营销需要大数据
大数据的作用与挑战
1. 业务视角不同带来的挑战
2. 技术架构不同带来的挑战
3．管理策略不同带来的挑战
从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。
大数据必然无法用单台的计算机进行处理，必须采用分布式计算架构。它的特色在于对海量数据的挖掘,但它必须依托云计算的分布式处理、分布式数据库、云存储和虚拟化技术。
大数据和云计算