文档介绍：山东大学
硕士学位论文
ETL在电力生产运维分析系统中的设计与实现
姓名:代志远
申请学位级别:硕士
专业:软件工程
指导教师:石冰
20090410
摘要本文利用栽匆滴袷萁谐槿⒆;⑶逑慈缓蠼ù砉母咧柿康程中要考虑到不同地市数据源的不同,以及数据源与目标数据模型的不同,面对数据源与目标间异构问题采用了撼迩椿航庹庵植蛔悖员懔偈贝娲⒉煌源业务系统的源数据,提高数据集市获取数据的质量,作为数据采集的前期工作。在数据采集过程中我们对源数据进行按照一定规则的抽取,并利用对目标表的映射,根据指定的抽取规则如增量或直接刷新抽取,实现利用通过际跬瓿傻本文以山东省电力总公司的生产运维分析系统为背景,我们数据来源分为两种:一种是镅悦枋龅钠胀ㄎ募恢质窍钟猩畔⑾低车氖菘猓虼苏本系统已经于成功上线运行,目前稳定运行良好。已经成为山东省电网运营决策的重要支持系统之一。此外系统还在周边省市进行推广。但系统仍存在不足之处,作为决策支持系统,其系统需要提供更多的业务综合分析,故而系统还需电力生产是电力运营中的主要业务,电力发电、用电量的统计和管理是对电力行业经营和风险控制的重要方式。现有的电力信息系统一般作用于操作性数据,只是针对某一个业务而设定的短暂业务处理,大量的历史生产信息无法有效的被组织利用起来,并且行业中业务种类繁多,数据量大,信息相对孤立,因而要在复杂、海量、异构、分布式的源业务数据中进行数据的处理和分析是非常低效的。如何有效地组织和采集这些电力生产行业运营中产生的历史数据是我们需要进行解决的问题。数据加载到运维分析系统的数据集市层,提高运维分析系统的性能。数据采集过数据采集。针对在7⒘鞒谈丛拥奈侍猓颐抢霉ぷ髁鞯目7⒛J剑沟我们在开发时能专注于业务的开发,简化了我们的开发流程,提高了开发效率,最主要的是利用工作流的开发引擎我们解决了绦虻淖饕档鞫任侍猓迪至淖远葱小对系统的开发中比较有代表意义的几个主题如变电站情况分析、用电负荷统计分析、点用电负荷统计分析等,描述了开发操作中的数据采集过程的纳计和实现,其他模块的开发方法均与此类似。山东大学硕士学位论文
关键词:数据集市;数据模型;要进一步拓展。电力运营分析;山东大学硕士学位论文
甌瑄琣,甒琣..甒—,山东大学硕士学位论文猼.,:籇;籄,⑽’甀;
论文作者签名:畹际η┟论文作者签名:垡整兰:山鵌原创性声明关于学位论文使用授权的声明包含任何其他个人或集体已经发表或撰写过的科研成果。对本文的研本人完全了解山东大学有关保留、使用学位论文的规定,同意学本人郑重声明:所呈交的学位论文,是本人在导师的指导下,独立进行研究所取得的成果。除文中已经注明引用的内容外,本论文不究作出重要贡献的个人和集体,均已在文中以明确方式标明。本声明的法律责任由本人承担。期:校保留或向国家有关部门或机构送交论文的复印件和电子版,允许论文被查阅和借阅;本人授权山东大学可以将本学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或其他复制手段保存论文和汇编本学位论文。C苈畚脑诮饷芎笥ψ袷卮斯娑日
,运维分析系统是在现有信息系统无法提供有效决策信息的情况下提出的,他直接面向决策,用于支持和辅助管理者进行有效决策,侧重于分析处理。然而从上世纪年代开始,电程的工作需要,而分析系统就是要对信息数据库系统数据进行再加工处理,形成一个综合的,面向分析的支持环境,然而随着信息化的发展步伐的快速前进,如何利用现有的信息技术来帮助电力企业解决生产、经营的问题,并有效的对生产化发展的重要难题,数据仓库技术的出现正好解决了这个问题,数据仓库系统就是将原有信息系统的数据组织处理成面向分析的分析型数据。整个电力生产中包括,用电、发电、设备、安全、财务、项目等综合性的信务系统的数据,很难将他们集中的进行分析和展现,因此现有国家电网的综合查询、业务报表分析等系统已无法满足管理层从企业全局出发,对企业各个业务条线进行跨业务、多角度、多层次的综合分析的需求。因此,国家电网迫切需要建设电力生产运维分析系统,目标是实现、建立并完善电力生产业务经营分析数据为市场人员提供动态实时了解电力生产的的运营状况,将原来分散、孤立的数据资源集中存储、统一管理,建立完善、统一的报表与指标体系规范,有效改善指达到提升企业管理水平和竞争力的战略目标“A思菰ζ捣倍啾涞氖谐。龀力企业进行了不同程度的信息化建设,建立了多种低澈蚈低忱赐瓿扇做出系统、合理、有益的预测和指导,最终提高竞争力已经成为了当前电力信息息,在许多情况下,为了做出一个决策,可能需要访问分布在不同位置的信息业的集中化管理、提供企业管理者及时全面了解企业运营状况和市场动态的平台、标多人维护、多重上