文档介绍:浙江大学
硕士学位论文
分布式文件系统ZD-DFS的设计与实现
姓名:郭威
申请学位级别:硕士
专业:计算机应用
指导教师:陈刚
20060601
篁黧鋈杰篓堡圭堡塞生搬些鎏壅墨盏撼要涟麓蹩联潮迅速菱装,对纛联黼海爨数掇懿替撩霹读取残兔诸多瓣终应耀系缓黪黧癸受载。当文羚令数,读敬爨求急裁蠖麓霹容易罢致嚣套文转鬟绫瓣储和读取的性能要求,而现有的通用分布式文件系统并不专为甄联网应用背景件支持熬好豹分布式文件豢缆。零文设计实现麴分布式文件系统~玲袋用以元数据驻务器管理嚣台存僚溅务器熬形式向疲髑爨藏资源定位、受羧均筑、分统通过元数据管理服务器褥菇髓溅务器节患箍骰瀵足黯φ轸闱缶猜次骸T数据管糕服务器负责管理分布戏文件舔统的垒髑信意,实施资源寇能,数攘邋移秘负载均衡,管理维护慝奁存储节点,提供对分布式存储、分布姨攀务、文件瓷滚滚联等麓爱嚣全嚣支撩。疑元数据羧务器熬警理秘褒下,撬供了对客户接口秘。对备静文律鲢存德,渎墩,受裁,瓣除搽箨。一疆卜植济饰耥支持两阶段提交协议,实糯了协议,对搴务处理过程中的故障和常提供了容错机制。—蓖ǖ浪疲姹敬梁托奶榈确椒ūVち朔植际降数据一敞性。—植际轿募低澄:l嗍萏峁┝肆己玫拇娲ⅰ⒍猎Α⒈粉性能,系统各部分性撬均衡,不存程明显鹃镶辘溅颈。具有较好瀚掰扩腰性,裁够方筏德逡抒存蘧囊诗冀熊力冬扩旋,为大缀强终瘟建撵壤了较好熬瘸骚支关键字:集群隓分布式文件系统海蠼数据分布式存储负载均德分京式枣务数据迁移前趁爻翁峤皇骋恢滦务器负载过大丽成为整体谯能的瓶颈。瓶传统鹣文锌系统很难满懋海黛数据存的海爨小文件存储提供怠好的黢持。所以需袋汗发对互联网环境下的海量小文露焱蘩努、鼗蕹σ啤⑹臁融鄣茸航冢⒍薰┮桓鐾骋卉沧郝遏染稀8孟持。
汹懿篺那芿雔唷5雂瑚谮拶猢鮨基穞懒稍瑆豦。璬杵癦藏痨妻輘衧面痶黔豫毫鱮雂曲鼍∽溉,淞缸瓒阨襝鑫疆俊踦重穗傣蝕懿鞋王毯鵶埝瓣彗氆髓瞻甙豁隷鳌g錽确矗重量缭絣氇燃瓣豩触雃鰁匏觘邈。嬲激嚣猡童稿瑚琧簃卮纋壬秣。;籧騟珏琭瑁鑫C豷舡鋞搴雔抗鄃嚏鲈愫炒韊拿鑑裁豬糟。潞酝纨魏远贰辪柳臻跖燕埘赫皤膐飁簄&鷈糿╪琩仵蕄毛秙赶鷌∞鼢浙淀大学硕士研究生毕她论文扭爨凡嫡证鹟奈雝蹦鷄琩撕—韕钾∞黼猫≈╠鞋甌甦瞖鐂芏融阛,—,—琩,屯錿王。秘专╥。羚,,专,
第薹章绪论文件数量,特别是时代的到来,不止服务器会生成文件,客户端,测览课题的背景和意义等№。目前计算枫系统的影芰拖缘霉诒∪酰⑶艺庵智榻莼乖诓欢隙处理速度的差距越来越大。造成疧瓶颈的主要原因是虸/璞杆俣仍遥度的不匹配问题变得更加严重。计算能力的提高又产生了一批新型的计算枫应随着互联网迅速发展,⒉嫉男畔⒈纫酝龃蠛多,媾客、邮件、相册、论坛等成为个人发布信息的主要平台。根键次统计,我瓣网民数量融经达到了冢娑匀绱司薮蟮挠没海扛鲷联网公司都面对着来自互联网的海量数据的挑战。在诸多挑战中,对互联网海量文件的存储和检索成为诸多阚络应用服务器缢阉鞴璉擎氖滓8涸亍R蛭<术上、投资上等方瑟豹原霹,嚣莉大多数网络服务器采用单节点服务豹褥架,犹如用户登陆系统都被指定与一台服务器进行交互。这种~对一的计算模式存在着很多缺点。因为对于互联网上的文件储存,它有几个典型的特点:酋先是巨大的器氇会上传大慧的文件给服务器来保存;僮是同时这黧文件大小又基本是比较,』、的。大量的文件,大量的输出,对于传统的文件系统来说,意味着带宽,共享性,可用性,可恢复性的诸多问题,。文件系统作为计算枫磁盘资料的管理者,对于系统输入输出能力有重要的影响。/经验法则砻鳎的计算能力需要腎/碛佬。根据桑琧计算能力等硬件技术指针阻指数方式每个胄增长一倍,而磁盘带宽的增长却远远落后于计算能力的增长,使单机系统的计算与疧长豹不匹配。絮成电路技永的快速发震使得俣扔辛讼灾奶岣撸鞔排近几年,越来越多的并行/分布式系统由于同时采用多个辜扑隳芰τ隝/燕领域,妇多媒体、可撬化、其有重大拣战性豹科学和工程计算闽麓、器、疧密集藏的数据库、弱连接环境下的计算和网络教学等等,这魑应用对疧性能提出了更高的要求,同时也表明应用坚现出对“枨笥涝对龀さ那魇啤U就对月硬件和软7椒ㄊ迪掷肟蓒枣缩、畿可蠲弼络服务提出了更商浆要求浙江大学硕士研究生毕业论文
完成文件系统独立蹬来以减轻本遗№豹负掇。它将多个结点上的磁盘组织成为文件系统级别与实现难度分析