大數(shù)據(jù)分析在智能變電站狀態(tài)監(jiān)測(cè)系統(tǒng)中的應(yīng)用研究.pdf

1、隨著云計(jì)算、大數(shù)據(jù)處理等相關(guān)領(lǐng)域技術(shù)以及狀態(tài)監(jiān)測(cè)技術(shù)本身的迅猛發(fā)展，在智能變電站狀態(tài)監(jiān)測(cè)中得到廣泛地應(yīng)用。變電設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)量呈現(xiàn)指數(shù)級(jí)增長，給傳統(tǒng)的變電設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)平臺(tái)的存儲(chǔ)、管理與分析能力帶來了極大的挑戰(zhàn)，而現(xiàn)有硬件所提供的計(jì)算和存儲(chǔ)能力已難以適應(yīng)未來電力企業(yè)數(shù)據(jù)存儲(chǔ)優(yōu)化與并行處理的要求。將大數(shù)據(jù)分析技術(shù)融入到變電設(shè)備狀態(tài)監(jiān)測(cè)中，可以提高狀態(tài)監(jiān)測(cè)數(shù)據(jù)的利用率、信息共享與數(shù)據(jù)分析能力。
　　本文首先結(jié)合電力系統(tǒng)業(yè)務(wù)發(fā)展需求

2、，給出了一種傳統(tǒng)變電設(shè)備狀態(tài)監(jiān)測(cè)平臺(tái)的架構(gòu)方案。然后，鑒于傳統(tǒng)狀態(tài)監(jiān)測(cè)平臺(tái)存儲(chǔ)性能差、分析效率低等問題，設(shè)計(jì)了一種大數(shù)據(jù)環(huán)境下變電設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)平臺(tái)，提出了基于Hive的關(guān)系型聯(lián)機(jī)分析(ROLAP)、基于Impala的關(guān)系型聯(lián)機(jī)分析(ROLAP)和基于HBase的多維聯(lián)機(jī)分析(MOLAP)三種分布式數(shù)據(jù)分析方案。同時(shí)，設(shè)計(jì)了基于Hive的分布式ROLAP星型模型及狀態(tài)監(jiān)測(cè)平臺(tái)的工作流程。常規(guī)數(shù)據(jù)模型涉及大量的維表和事實(shí)表之間的映射運(yùn)算

3、，導(dǎo)致數(shù)據(jù)分析的響應(yīng)速度慢、開銷大等問題。針對(duì)該問題，本文提出一種基于無連接層次編碼的變電設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)模型，該模型把維表的層次信息進(jìn)行編碼，壓縮至事實(shí)表中，減少大量連接操作，以優(yōu)化其性能。
　　由于Hadoop平臺(tái)具有易擴(kuò)展、可靠性高、高效的設(shè)備利用率等特點(diǎn)，本文利用Hadoop分布式集群搭建變電設(shè)備狀態(tài)監(jiān)測(cè)實(shí)驗(yàn)平臺(tái)，采用Hive和Impala等大數(shù)據(jù)分析工具，在不同規(guī)模監(jiān)測(cè)數(shù)據(jù)集上對(duì)本模型的監(jiān)測(cè)數(shù)據(jù)加載、上卷操作、存儲(chǔ)開銷等