文档介绍:云计算与大数据技术云计算与大数据技术人民邮电出版社人民邮电出版社王鹏王鹏黄焱黄焱安俊秀安俊秀张逸琴张逸琴编著编著并行计算实验室-12-16目录CONTENTS?第1章云计算与大数据基础?第2章云计算与大数据的相关技术?第3章虚拟化技术?第4章集群系统基础?第5章 MPI—面向计算?第6章 Hadoop—分布式大数据系统?第7章—面向数据的高性能计算集群系统?第8章 Storm—基于拓扑的流数据实时计算系统?第9章服务器与数据中心?第10章云计算大数据仿真技术第第11章云计算与大数据基础章云计算与大数据基础《《云计算与大数据技术云计算与大数据技术》》并行计算实验室-12-16第1章云计算与大数据基础?? 云计算技术概述云计算技术概述— 云计算简介— 云计算的特点— 云计算技术分类?? 大数据技术概述大数据技术概述— 大数据简介— 主要的大数据处理系统— 大数据处理的基本流程?? 云计算与大数据的发展云计算与大数据的发展并行计算实验室-12- 云计算简介??云计算技术是硬件技术和网络技术发展到一定阶云计算技术是硬件技术和网络技术发展到一定阶段而出现的一种新的技术模型段而出现的一种新的技术模型??云计算并不是对某一项独立技术的称呼,而是对云计算并不是对某一项独立技术的称呼,而是对实现云计算模式所需要的所有技术的总称。实现云计算模式所需要的所有技术的总称。并行计算实验室-12-16??云计算技术的内容很多云计算技术的内容很多—包括分布式计算技术、虚拟化技术、网络技术、服务器技术、数据中心技术、云计算平台技术、存储技术等。??从广义上说,云计算技术几乎包括了当前信息技术中的从广义上说,云计算技术几乎包括了当前信息技术中的绝大部分。绝大部分。 云计算简介并行计算实验室-12-16??维基百科维基百科中对中对云计算云计算的的定义定义为:为:—云计算是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需求提供给计算机和其他设备。??20122012年的年的国务院政府工作报告国务院政府工作报告将云计算作为将云计算作为国家战略性新国家战略性新兴产业兴产业给出了给出了定义定义::—云计算是基于互联网的服务的增加、使用和交付模式,通常涉及通过互联网来提供动态、易扩展且经常是虚拟化的资源。—云计算是传统计算机和网络技术发展融合的产物,它意味着计算能力也可作为一种商品通过互联网进行流通。 云计算简介并行计算实验室-12-16??云计算技术的出现改变了信息产业传统的格局。云计算技术的出现改变了信息产业传统的格局。—传统的信息产业企业既是资源的整合者又是资源的使用者;—这这种格局并不符合现代产业分工高度专业化的需求,同时也不符合企业需要灵敏地适应客户的需要。 云计算简介并行计算实验室-12-16—传统的计算资源和存储资源大小通常是相对固定的,面对客户高波动性的需求时会非常的不敏捷,企业的计算和存储资源要么是被浪费,要么是面对客户峰值需求时力不从心。—云计算技术使资源与用户需求之间是一种弹性化的关系,资源的使用者和资源的整合者并不是一个企业,资源的使用者只需要对资源按需付费,从而敏捷地响应客户不断变化的资源需求,这一方法降低了资源使用者的成本,提高了资源的利用效率。 云计算简介并行计算实验室-12-16??云计算时代基本的云计算时代基本的33种角色:种角色:资源的整合运营者、资源的使用者、终端客户。资源的整合运营者、资源的使用者、终端客户。—资源的整合运营者就像是发电厂负责资源的整合输出;—资源的使用者负责将资源转变为满足客户需求的各种应用;—终端客户为资源的最终消费者。 云计算简介