文档介绍：分布式存储技术架构方案
.需求分析
应用数据流逻辑架构
如下图表示，整个系统应用数据流结构。
搏注寻人
IB/DOMa/s
搀*诚出
ISkICOVfi/i
1?
在线存储
150TB
S耳患医
近线存曲
60归档区
〔：
三航集群逋漕
L8G号.；L5G读
1
方存工两分1OOT
O2G%.12取
c
同褥i
rnrn见
3E二:Kj；；：ll|
」二:二1fTHn
□
分布式存储架构设计说明
纵向分区设计
计算密集区，主要提供分布式存储架构中的计算用途。计算功能：部署20台存储服务器。确保计算优先，即运行流数据业务的虚拟机，在线存储能够支撑3路200MB/S写入流、12路100MB/S写入流和15路100MB/S读取流，即近2GB/。每服务器系统盘本地部署，建议SATA硬盘RAID1;存储功能：
提供分布式存储数据环境，考虑横向连池，与其他两区存储硬盘配置相同，建议
500GBSSD高速存储。
数据管理区，主要提供分布式存储架构中的数据库管理和虚拟机
管理。数据库管理建议以虚拟机形式部署，近线存储介质中划分5TB空间，以裸设备形式映射给Hypervisor,满足OLTPI/O要求。虚拟机集群管理通过vCenter建立状态，实现HA功能，完成计算资源的高可用。并且可根据实际软件资源响应情况，灵活调整计算资源，在业务连续运行状态下实现动态迁移。
迁移归档区，提供在线数据到近线数据迁移，近线数据到归档存储迁移。在线到近线的迁移速度，应达到200MB/S,近线存储读取速度，可以达到单路80MB/S,支持大于15路读，。在线到近线的迁移利用Hypervisor存储迁移功能，在虚机开机状态下迁移数据业务。归档迁移利用第三方备份软件或光盘塔实现。
横向互联设计
管理千兆网，实现虚拟机管理，数据库管理，虚拟机迁移和集群通信四大功能。千兆以太网建议专网专用。Hypervisor主机采用SSD,以SSD硬盘为介质的存储池承担在线存储，提供的巨大的吞吐量和高速的读写性能，满足项目中对在线存储读写性能的需求。
生产万兆网，运行虚拟机业务系统，联通服务器区向在线存储区读写职能。，
在线万兆网，两台万兆网络交换机（外网）通过堆叠技术（可横
向扩展），实现两台万兆交换机双活应用，即两台万兆交换机同时工作，充分发挥网络性能和应用带宽性能。每个存储节点通过至少捆绑两个万兆端口，并连接存储外部网络万兆交换机，实现单个存储节点供应用直接读取带宽至少为物理
20GBps。
近线FC网，提供SSD在线数据向SATA盘阵200MB/S写入，
。建议多路径FC交换机。以大量的SATA硬盘为介质的存储池承担近线存储，提供满足业务需求的容量，同时也提供巨大的吞吐量，满足项目中对近线存储读写性能需求。
离线千兆网，以带库方式或光盘塔方式完成长期数据归档要求，共4PB。
分布式存储架构特征
扩展性和高性能
分布式集群存储利用双重特性（多副本）来提供几TB至数PB的高扩展存储解决方案。Scale-Out架构允许通过简单地增加资源来提高存储容量和性能，磁盘、计算和I/O资源都可以独立增加，支持10GbE高速网络互联。弹性哈希（ElasticHash）解除了分布式存储对元数据服务器的需求，消除了单点故障和性能瓶颈，真正实现了并行化数据访问。
负载自动均衡技术
分布式存储采用无中心服务器架构模式来管理整个分布式存储
文件系统，所有元数据和数据均保存在各个节点上，文件则划分为多
个块存储在不同的存储节点上。
管理节点维护了一个统一的命名空间，同时掌握整个系统内存储节点的使用情况，当客户端向元数据发送数据读写的请求时，根据存储节点的磁盘使用情况、网络负担等情况，选择负担最轻的存储节点对外提供服务，自动均衡负载负担。
另外，当有一个存储节点因为机器故障或者其他原因造成离线时，节点会将此机器自动屏蔽掉，不再将此存储节点提供给客户端使用，同时存储在此存储节点上的数据也会自动的备份到其他可用的存储节点上，自动屏蔽存储节点故障对系统的影响。
高可用性
分布式存储可以对文件进行自动复制，如镜像或多次复制，从而确保数据总是可以访问，甚至是在硬件故障的情况下也能正常访问。自我修复功能能够把数据恢复到正确的状态，而且修复是以增量的方
式在后台执行，几乎不会产生性能负载。
全局统一命名空间
全局统一命名空间将磁盘和内存资源聚集成一个单一的虚拟存储
池，对上层用户和应用屏蔽了底层的物理硬件
存储资源可以根据需
要在虚拟存储池中进行弹性扩