文档介绍：浙江大学硕士学位论文海量时序数据高可用性实时存储技术研究与应用姓名:金鑫申请学位级别:硕士专业:计算机应用技术指导教师:周波201201浙江大学硕士学位论文摘要摘要随着社会的高速发展和信息化技术的普及,世界各地每时每刻都有大量的时序数据在诸如金融、工业、社交网络等领域产生,且在量上呈现快速增长趋势。由于这些时序数据在监管、决策、预测等方面有着极为重要的作用,随之而来的数据实时存储问题就显得极具探讨价值。现行的数据实时存储系统主要是基于关系数据库的实时存储技术,由于关系数据库本身设计的复杂性,导致了现行实时存储系统一系列效率,扩展性和移植性的问题。因此,本文提出了一种基于现有文件系统的时序数据实时存储技术。本文对基于文件的海量时序数据实时存储技术进行了论述,并针对海量时序数据流特征分析归纳了其实时存储技术的需求,提出相应的实时存储方案。分布式部署和高度定制化的线程模型带来了极高的扩展性,资源动态调度策略提高了在高吞吐时的抗压能力,并提出了一个基于高可用性集群和文件分时段索引策略的数据实时存储模型。本文对海量时序数据实时存储方案的技术架构,详细设计以及关键技术实现等方面进行了全面阐述,并通过方案在北美和欧洲各大金融市场的实际应用情况论证方案的可行性和高效性。关键词:时序数据,实时存储,高可用性,分布式,集群浙江大学硕士学位论文AbstractAbstractAsthefastprogressingofsocietyandthe、析despreadingofinformationtechnology,massivetimeseriesdataaregeneratedatalltimesonsuchdomainsasfinance,works,,strategicdecisionandtrendprojection,,problemsalebroughtabout,suchasinefficiency,,,summarizestherequirementofapersistencesystembasedonthecharacteristicsofmassivetimeseriesdata,,dynamicresourceschedulingstrategytoguaranteehighthroughput,eupwithatimeseriesdatapersistencemodelbasedonhigh—,:Timeseriesdata,Persistence,Filesystem,Distributeddeployment,Dynamicscheduling,Cluster,Index浙江大学硕士学