1 / 36
文档名称:

mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署性能测试).docx

格式:docx   大小:1,679KB   页数:36页
下载后只包含 1 个 DOCX 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署性能测试).docx

上传人:镜花水月 2018/9/27 文件大小:1.64 MB

下载得到文件列表

mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署性能测试).docx

相关文档

文档介绍

文档介绍:mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署,性能测试)
原文网址:http://bbs./thread-1644309-1-
#!/bin/tony
1. 我在性能测试中间遇到些问题,因为我时间有限,所以希望大家一起来测试解决,群策群力。有什么问题请大家及时指出来,因为我也处在一个不断摸索的阶段。
2. mfs不多做介绍,具体细节请参考本版mfs实践文章http://bbs./thread-1643863-1- ,或者baidu,google 关键字  田逸。
3. 希望大家能提供更好的存储/文件系统的测试模型,来一起完善本文档。(热烈欢迎大家奉献测试脚本,测试用例等)。
4. 希望大家提供生产环境的实际案例,配置环境,脚本,监控机制等等。
5. 希望熟悉代码的朋友去看看mfs内部实现的机制。
6. 特别感谢田逸的文档 ./10037/263515 。
7. 特别感谢qq群战友:tt,灵犀,流云风,hzqbbc在qq群内对广大爱好者分享宝贵经验。
8. 特别感谢存储专家-《大话存储》的作者:冬瓜头 ,在我进行性能测试的时候,对我进行的指导。
9. 特别感谢qq群战友:高性能架构,CU ID: leo_ss_pku,制作更专业更精美的pdf版本:   ( MB, 下载次数: 3868) , 大家也可以他的blog上浏览在线版本:/
     
mfs优势:
-1. Free(GPL)
0. 通用文件系统,不需要修改上层应用就可以使用(那些需要专门api的dfs好麻烦哦!)。
1. 可以在线扩容,体系架构可伸缩性极强。(官方的case可以扩到70台了!)
2. 部署简单。(sa们特别高兴,领导们特别happy!)
3. 体系架构高可用,所有组件无单点故障。 (您还等什么?)
4. 文件对象高可用,可设置任意的文件冗余程度(提供比raid1+0更高的冗余级别),而绝对不会影响读或者写的性能,只会加速哦!)
5. 提供Windows回收站的功能.(不怕误操作了,提供类似oralce 的闪回等高级dbms的即时回滚特性,oralce这些特性可是收费的哦!)
6. 提供类似Java语言的 GC(垃圾回收).
7. app,emc,ibm等商业存储的snapshot特性。
8. google filesystem的一个c实现。(google在前面开路哦!)
9. 提供web gui监控接口。
10. 提高随机读或写的效率(有待进一步证明)。
11. 提高海量小文件的读写效率(有待进一步证明)。
可能的瓶颈:
0. master本身的性能瓶颈。(不太恰当的比方:类似mysql 主从复制,从的可以扩展,主的不容易扩展)。(qq群战友: hzqbbc)
         短期对策:按业务切分
1. 体系架构存储文件总数的可遇见的上限。
       (mfs把文件系统的结构缓存到master的内存中,个人认为文件越多,master的内存消耗越大,8g对应2500kw的文件数,2亿文件就得64GB内存)。(qq群战友:hzqbbc)
         短期对策:按业务切分
2. 单点故障解决方案的健壮性。(qq群战友: tt  , hzqbbc)
架构图
 
 
——————————————————
index
1. mfs master
2. mfs  chunkserver
3. mfs client
4. 系统管理
5. 性能测试
6. 参考文献
测试数据
                测试模型1 
                测试模型2
7. 感谢
8. 附录
9. 实际操作案例
10. 生产环境案例
11. web gui 监控
12. (中文翻译:QQ群战友 Cuatre )
13. mfs官方英文FAQ(TC版)(提供者:QQ群战友 灵犀 )
14. mfs master 热备方案
15. mfs nagios监控程序(提供者:QQ群战友 流云风)
————————————————
环境:
master          1台
chunkserver    3台
client            1台
os:
x64
1 mfs master
安装mfs master
wget ./project/moosefs/moosefs/-