1 / 66
文档名称:

分布式海量数据并行传输消息中间件设计与实现.pdf

格式:pdf   页数:66
下载后只包含 1 个 PDF 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

分布式海量数据并行传输消息中间件设计与实现.pdf

上传人:durian 2014/3/3 文件大小:0 KB

下载得到文件列表

分布式海量数据并行传输消息中间件设计与实现.pdf

文档介绍

文档介绍:长春理工大学
摘要用多台传输处理机分工并行传输方式,将传输任务分解为若干个子任务,解决了海量数据传输处理上的瓶颈。采用了基于数据库同步机制的数据传输技术、异构传输数据库配置、传输数据配置技术,在很大程度随着信息化技术的不断发展,行业内部和行业间的业务数据量呈几何级数递增,海量数据的传输与处理难题成为制约信息化产业扩大的瓶颈,本文研究了的技术,并以技术为基础,完成了分布式海量数据并行传输消息中间件系统的设计与实现。系统采上解决了异构数据库系统问数据传输不兼容的问题,从而极大地解决由于已有消息中间件的缺点而带来的问题。关键词:中间件同步
瓵..,,.甦琧,.琁琧,
⋯⋯:铷年鲫么日盔查童作者签名:垄堑亟年上月年土月丛日量数据并行传输消息中间件的设计与实现》是本人在指导教师的指导下,独立进行研究工作所取得的成果。除文中已经注明引用的内容外,本论文不包含任何其他个人或集体已经发表或撰写过的作品成果。对本文的研究做出重要贡献的个人和集体,均已在文中以明确方式标明。本人完行检索,也可采用影印、缩印或扫描等复制手段保存和汇长春理工大学硕士学位论文原创性声明本人郑重声明:所呈交的硕士学位论文,《分布式海全意识到本声明的法律结果由本人承担。长春理工大学学位论文版权使用授权书本学位论文作者及指导教师完全了解“长春理工大学硕士、博士学位论文版权使用规定”,同意长春理工大学保留并向国家有关部门或机构送交学位论文的复印件和电子版,。作者签名:
第一章绪论§研究的目的和意义§消息中间件研究现状务信息由基层单位采集,逐级汇总,因此需要对海量数掘进行传输。各随着信息技术的快速发展,各个行业已经建立起基于广域网络的、分布式业务信息管理体系,它的应用范围不断地扩大,在行业内部,业行业间,由于电子商务、电子政务业务活动兴起和蓬勃发展,业务交互日益频繁,信息资源共享、信息资源的挖掘与利用的需求迅速增长。系统内部上下级数掘库之间的数据传输和不同系统之间的数据交换已成为信息产业发展的一个瓶颈,根据上面的情况这就需要我们去研究一个适应中国国情的而且费用低、网络条件要求不高的、能够支持海量数据并行传输的消息中间件。因此建立通用的、快速而安全、高效而可靠的传输通道,开发大型、支持海量数据并行传输的消息中间件就成为确保庞大的网络信息系统正常运转的关键问题。本文是研究一种可行的技术,屏蔽了底层分布式环境的复杂性与异构性,用户通过对相应的可视化界面完成适合本系统的传输配置工作,使传输系统针对不同的应用系统和不同的操作平台而不再需要进行重复开发,通过并行技术解决海量数据传输存在的问题。随着硬件设备、软件技术和网络技术的发展,带来了信息化发展的新浪潮,人们感受到了计算机及网络技术所带来的好处,于是对电子化、信息化应用的需求也越来越迫切。信息技术以其强大的渗透力,深入到社会经济生活的各个方面。如商业、金融、制造业、运输业、零售业以及卫生保健和政府部门等。各个行业已经建立起基于广域网络的、分布式业务信息管理体系,行业内部、行业问业务交互闩益频繁,信息资源共享、信息资源的挖掘与利用的需求迅速增长。建立通用的、快捷安全、可靠而高效的传输通道,开发通用数据并行传输平台成为确保庞大的网络信息体系正常运转、以及今后电予商务、电子政务全面发展的关键性问题。数据库之间的一致性与数据交换的及时性是数据传输系统面临的两大难题。由于网络宽带、传输故障、电源、服务器及网络设备故障、
消息中『日悄壳爸形始际醯姆⒄谷鹊恪K视糜谌魏涡枰=便,从而满足企业内部对系统伸缩性和可扩展性的要求。消息中间件在目前的市场上占据主导地位,而且发展势头迅猛。消息中间件以其独特他们在银行、证券、电信等高端行业以及等行业中得到广泛应用。微软消息中间件可以在应用之『日迪滞扑褪降纳涛翊浠数据库及软件系统故障等原因导致系统瘫痪、数据丢失,造成数据库之间数据不一致、系统无法运行;由于需传输的数掘量过大、传输耗时过长,造成传输频繁失败,信息更新不及时,影响业务系统的正常运行网络通信的系统,负责建立网络通信的通道,进行数掘或文件发送。消息中间件可以跨平台操作,为不同操作系统上的应用软件集成提供方的优势为各种分布式应用的开发注入了强大动力,极大地推动了应用系统集成的发展【4送猓扑慊布筒僮飨低车摹昂竺拧蔽侍馐撬加密软件、身份认证、防火墙都控制不了的,而处于操作系统软件与用户应用软件中间的中间件,相当于一个过滤层,所有的数据进出都要通过这个过滤层。中间件是否可靠,将关系到所有数据是否安全,而把住中间件这一关,也可能将来自“后门”的攻击拒之门外,为解决中国的信息、安全问题提供一种可能的方法【薄近几年,国内外中间件市场主要被两大国外厂商虰垄断,目前,