电力系统自动化
電力繫統自動化
전력계통자동화
AUTOMATION OF ELECTRIC POWER SYSTEMS
2013年
4期
92-97
,共6页
云计算%数据处理%广域测量系统%MapReduce
雲計算%數據處理%廣域測量繫統%MapReduce
운계산%수거처리%엄역측량계통%MapReduce
为解决目前广域测量系统(WAMS)海量数据处理中存在的数据冗余、处理效率低等问题,设计并实现了一个基于Hadoop的WAMS数据处理云计算平台.首先,给出了平台的体系结构.其次,设计了基于Hadoop分布式文件系统(HDFS)存储的WAMS海量数据加载方法和利用MapReduce模型实现多个文件数据的并行抽取、转换和加载(ETL)操作流程.提出了结合MapReduce的MPApriori数据挖掘算法,用于高效地挖掘出连锁故障时各站点之间的相互影响.最后,通过对区域电网WAMS实际数据进行处理,验证了Hadoop处理海量数据的高效性.所述平台适用于高性能局域网络连接的计算机集群对海量电网数据进行文件数据处理.
為解決目前廣域測量繫統(WAMS)海量數據處理中存在的數據冗餘、處理效率低等問題,設計併實現瞭一箇基于Hadoop的WAMS數據處理雲計算平檯.首先,給齣瞭平檯的體繫結構.其次,設計瞭基于Hadoop分佈式文件繫統(HDFS)存儲的WAMS海量數據加載方法和利用MapReduce模型實現多箇文件數據的併行抽取、轉換和加載(ETL)操作流程.提齣瞭結閤MapReduce的MPApriori數據挖掘算法,用于高效地挖掘齣連鎖故障時各站點之間的相互影響.最後,通過對區域電網WAMS實際數據進行處理,驗證瞭Hadoop處理海量數據的高效性.所述平檯適用于高性能跼域網絡連接的計算機集群對海量電網數據進行文件數據處理.
위해결목전엄역측량계통(WAMS)해량수거처리중존재적수거용여、처리효솔저등문제,설계병실현료일개기우Hadoop적WAMS수거처리운계산평태.수선,급출료평태적체계결구.기차,설계료기우Hadoop분포식문건계통(HDFS)존저적WAMS해량수거가재방법화이용MapReduce모형실현다개문건수거적병행추취、전환화가재(ETL)조작류정.제출료결합MapReduce적MPApriori수거알굴산법,용우고효지알굴출련쇄고장시각참점지간적상호영향.최후,통과대구역전망WAMS실제수거진행처리,험증료Hadoop처리해량수거적고효성.소술평태괄용우고성능국역망락련접적계산궤집군대해량전망수거진행문건수거처리.
