多維數(shù)據(jù)倉庫技術(shù)在礦井信息化系統(tǒng)中的研究及應(yīng)用.pdf

1、隨著煤礦企業(yè)規(guī)模的擴(kuò)大和信息化水平的不斷提高，在經(jīng)營管理過程中產(chǎn)生了海量的業(yè)務(wù)數(shù)據(jù)，如何有效地管理和重組數(shù)據(jù)資源，提煉出有價(jià)值的信息以供決策使用，成為當(dāng)前煤炭行業(yè)“大數(shù)據(jù)”發(fā)展過程中面臨的一大難題，而建立基于多維數(shù)據(jù)倉庫技術(shù)的礦井信息化系統(tǒng)是解決這一問題的有效途徑。
　　本文針對煤礦企業(yè)生產(chǎn)運(yùn)營特點(diǎn)，結(jié)合礦井?dāng)?shù)據(jù)多源、異構(gòu)的特殊性，對數(shù)據(jù)倉庫架構(gòu)和ETL（Extract，Transform，Load）算法兩方面進(jìn)行系統(tǒng)研究，分別提

2、出了適合礦井?dāng)?shù)據(jù)特點(diǎn)的改進(jìn)方法，最后以大屯煤電公司綜合調(diào)度信息管理系統(tǒng)為例，設(shè)計(jì)實(shí)現(xiàn)了礦井多維數(shù)據(jù)倉庫系統(tǒng)。論文主要工作如下：
　　（1）在數(shù)據(jù)倉庫架構(gòu)方面，分析傳統(tǒng)數(shù)據(jù)倉庫架構(gòu)中存在的不足，設(shè)計(jì)了一種基于多數(shù)據(jù)集市的礦井多維數(shù)據(jù)倉庫模型，各數(shù)據(jù)集市之間通過共同維加強(qiáng)聯(lián)系。提出一種利用二次集成簡化開發(fā)，優(yōu)化數(shù)據(jù)結(jié)構(gòu)的數(shù)據(jù)倉庫/數(shù)據(jù)集市體系結(jié)構(gòu)的改進(jìn)方法。
　?。?）在ETL算法方面，設(shè)計(jì)基于元數(shù)據(jù)的改良實(shí)時(shí)ETL過程，提出了

3、一種基于數(shù)據(jù)質(zhì)量控制的實(shí)時(shí)ETL改進(jìn)算法，實(shí)驗(yàn)表明：基于系統(tǒng)數(shù)據(jù)日志的實(shí)時(shí)ETL算法實(shí)現(xiàn)了對數(shù)據(jù)倉庫與業(yè)務(wù)系統(tǒng)之間數(shù)據(jù)共享零延時(shí)的要求；增加了問題數(shù)據(jù)處理模塊及抽樣數(shù)據(jù)質(zhì)量評估模塊的基于數(shù)據(jù)質(zhì)量控制的ETL改進(jìn)算法大大優(yōu)化了ETL工作流程，提高了進(jìn)入數(shù)據(jù)倉庫中的數(shù)據(jù)質(zhì)量。
　　（3）將上述研究成果應(yīng)用在大屯煤電公司綜合調(diào)度信息管理系統(tǒng)中，設(shè)計(jì)了生產(chǎn)信息記錄、事故安全記錄、煤炭運(yùn)銷記錄三大主題模塊，在企業(yè)數(shù)據(jù)分析、企業(yè)決策制定的應(yīng)用