云技术在电力系统不良数据处理中的研究与应用
作者单位:东南大学
学位级别:硕士
导师姓名:周建华;闫天军
授予年度:2015年
学科分类:12[管理学] 1201[管理学-管理科学与工程(可授管理学、工学学位)] 080802[工学-电力系统及其自动化] 0808[工学-电气工程] 08[工学]
主 题:云计算 不良数据 数据挖掘 Hadoop Storm
摘 要:大数据时代,电网运行产生的数据呈爆炸式增长,传统的计算与存储模式已逐渐无法适应电力系统的需求。云计算技术作为一种具有超大规模、高可用性和高伸缩性等特性的海量数据处理新技术能够用于解决该问题,并为新一代电力信息平台的建设提供解决方案。本文着重针对云技术在电力系统不良数据辨识与修正领域的应用展开了研究。论文阐述了云技术与电力系统不良数据处理的国内外研究现状,研究了批处理云计算框架Hadoop与实时云计算框架Storm的核心技术与实现机理,在此基础上,从数据挖掘技术与拓扑理论两个方面设计了多种云计算下的不良数据处理算法。数据挖掘技术方面,提出了一种Hadoop下的分布式系统聚类算法用于数据预处理。通过将不良数据辨识问题转化为二类分类问题,提出了一种基于支持向量机并采用滑动窗口机制的分布式不良数据处理算法,算法分为离线与在线两个模式,离线模式采用Hadoop进行分布式处理,首先对样本数据进行聚类,对每个保留的类簇按时段划分并分别训练SVM模型;在线模式通过设置滑动窗口接收待辨识数据,采用对应的SVM模型辨识坏数据并采用线性插值法对其进行修正。拓扑理论方面,提出了一种Storm下的针对全网有功功率的分布式不良数据处理算法。算法通过电路约束条件进行数据处理,在子网边界处引入冗余信息使得Storm能够对每个子网进行分布式计算,最后在母网层面整合计算从而实现全网数据辨识与修正。同时,提出了一种Storm下的分布式状态估计算法。算法通过在联络线处引入虚拟节点并从虚拟节点处进行子网分裂进而针对子网进行分布式状态估计计算与不良数据处理,其中坏数据处理部分简化了残差搜索辨识法的实现流程。论文针对提出的每种算法进行了仿真测试,结果表明它们具备较好的不良数据处理能力和实时性,具有一定的应用前景。