文档介绍：* HDFS 云存储平台搭建* 云存储结构模型* 目标* 在现有的硬件基础上,选择合适的云存储平台; * 完成云存储平台的搭建,实现文件存储功能; * 在建立的云存储平台上开发若干个应用案例。* HDFS * Hadoop Distributed File System ,简称 HDFS , 是一个分布式文件系统。 HDFS 有着高容错性的特点,并且设计用来部署在低廉的硬件上。而且它提供高传输率来访问应用程序的数据, 适合那些有着超大数据集的应用程序。* Apache Hadoop 是一个软件框架(平台),它可以分布式地操纵大量数据。它于 2006 年出现, 由 Google 、 Yahoo! 和 IBM 等公司支持。可以认为它是一种 PaaS 模型。* 它的设计核心是 MapReduce 实现和 HDFS ( Hadoop Distributed File System) ,它们源自 MapReduce (由一份 Google 文件引入)和 Google File System 。* 应用平台和开发工具* 操作系统: Linux * 开发语言: Java * 应用案例* Yahoo ! 拥有最大的 Hadoop Linux 生产架构, 共由 10,000 多个内核组成,有超过 5PB 字节的储存分布到各个 DataNode 。在它们的 Web 索引内部差不多有一万亿个链接。* 可以使用 Amazon pute Cloud (EC2) 构建一个包含 20 个节点的虚拟集群。事实上,纽约时报使用 Hadoop 和 EC2 在 36个小时内将 4TB 的 TIFF 图像—包括 405K 大 TIFF 图像, SGML 文章和 405K XML 文件—转换为 800K 适合在 Web 上使用的 PNG 图像。这种处理称为云计算,它是一种展示 Hadoop 的威力的独特方式。