文档介绍：浙江工业大学硕士学位论文基于Hadoop的海量视频数据存储及转码系统的研究与设计作者姓名: 李晓波指导教师:孟利民教授浙江工业大学信息工程学院 2013年3月 Dissertation Submitted toZhejiang University ofTechnology fortheDegree ofMaster THE RESEARCH AND DESIGN OFMASSⅣE VⅢEO AND TR ANSCODING SYSTEM BASED ON HADO OP Candidate:Li Xiaobo Advisor: Limin College ofInformation Engineering Zhejiang University ofTechnology Mar 2013 浙江工业大学学位论文原创性声明本人郑重声明:所提交的学位论文是本人在导师的指导下,独立进行研究工作所取得的研究成果。除文中已经加以标注引用的内容外,本论文不包含其他个人或集体已经发表或撰写过的研究成果,也不含为获得浙江工业大学或其它教育机构的学位证书而使用过的材料。对本文的研究作出重要贡献的个人和集体,均已在文中以明确方式标明。本人承担本声明的法律责任。储始嚏赢浊吼姆4)月弓日学位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定,同意学校保留并向国家有关部门或机构送交论文的复印件和电子版,允许论文被查阅和借阅。本人授权浙江工业大学可以将本学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。本学位论文属于1、保密口,在年解密后适用本授权书。 2、不保密日。(请在以上相应方框内打“、/”) 作者签名: 导师签名: b月多日易月易吻浙江工业大学硕士学位论文基于Hadoop的海量视频数据存储及转码系统的研究与设计摘要随着物联网的不断发展与演化,它产生的各种数据将急剧增长,流媒体传输作为物联网行业的一个重要应用,其产生的视频数据是海量的。如果以集中存储的方式存放这些流媒体数据将付出昂贵的代价,也很难实现数据存储与分析的一体化。海量数据的存储与处理,近年来已经有了很多深入的研究,大量开源的云计算框架被提出。Hadoop作为分布式大数据存储与分析的工具,主要被应用于互联网、医疗系统等非视频业务数据的存储与处理。由于流媒体数据在文件格式、存储方式和搜索方式上与普通数据有很大的不同,直接将Hadoop应用到网络流媒体传输系统中将面临许多挑战。论文通过深入研究H_adoop框架和流媒体数据的特点,实现了海量视频数据的分布式存储与处理。本文完成的主要工作如下: ,以及网络流媒体传输系统,给出了海量视频数据存储与转码系统的需求分析,提出了系统的设计方案。、HDFS上流媒体数据文件的读写、分布式转码、数据库、 W曲管理等5个模块的设计。实现了基于Hadoop的海量视频数据存储、转码和管理一体化的整体解决方案。、下载速率、分布式转码的性能进行了实验分析。实验表明:在 Hadoop上实现海量视频数据的存储具有可行性,高效的存储策略有利于海量视频数据的快速搜索,分布式的转码系统显著提升了转码的效率,满足用户通过普通的播放器下载并查看录像回放的需求。关键词:流媒体传输,Hadoop,分布式存储,分布式转码浙江工业大学硕士学位论文 THE RESEARCH AND DESIGN OFMASSⅣE VmEO DA-TA STORAGE AND豫ANSCODING SYSTEM BASED ON HADOOP ABSTRAC T With thedevelopment andevolution oftheInteract,thegenerated dataisrapidlyincreasing and willbe even expanded by streammediatransmission,an important application ofthe storage ofstream media data is too expensive while theintegration ofdatastorage and analysis ishard cloud calculation platform werepublished formassive datastorage atoolfor distributed massive datastorage a