MapReduce海量数据并行处理ch.01.ppt

文档介绍：鸣谢:本课程得到鸣谢:本课程得到GoogleGoogle公司公司((北京)北京)?为什么需要并行计算??为什么需要大规模数据并行处理?贯穿整个计算机技术发展的核心目标:提高计算性能!Intel微处理器每秒1千8百亿次浮点运算!近20年性能提高3千多倍巨型机:中国天河一号,2010年底世界TOP500强第1名每秒2千5百多万亿次浮点运算,:70-80年代: Intel处理器: 71年,4004,4bits; 78年,8086,8bits; 82年,80286:16bits; 85年~90s,80386,486,Pentium,P2,P3,P4:32bits 05年~,Pentium D往后-Core i3,i5,i7::芯片集成度每18个月翻一倍,计算性能提高一倍为什么需要并行计算?为什么需要并行计算?(Instruction-Level Parallelism,ILP) RISC结构 5级流水线为什么需要并行计算?为什么需要并行计算?,寄存器重命名,超长指令字(VLIW),超标量(Superscalar),乱序执行,Cache……Pentium 4(CISC结构)采用了20级复杂流水线为什么需要并行计算?为什么需要并行计算?:1990s-2004:为什么需要并行计算?为什么需要并行计算?所有这些技术极大地提高了微处理器的计算性能,但2004后处理器的性能不再像人们预期的那样提高单核处理器性能提升接近极限!集成度性能