數(shù)據(jù)倉庫中ETL建模問題的研究.pdf

1、ETL按照統(tǒng)一的規(guī)則集成數(shù)據(jù)，完成數(shù)據(jù)從數(shù)據(jù)源向目標(biāo)數(shù)據(jù)倉庫的轉(zhuǎn)化。它是解決異構(gòu)數(shù)據(jù)一致性和集成化的有效方案，是數(shù)據(jù)倉庫獲得高質(zhì)量數(shù)據(jù)的重要環(huán)節(jié)。為了輔助設(shè)計(jì)人員更好地進(jìn)行 ETL過程的設(shè)計(jì)和編碼實(shí)現(xiàn)，降低ETL過程的設(shè)計(jì)和維護(hù)代價(jià)，提高ETL工具的性能，相關(guān)領(lǐng)域?qū)＜姨岢隽藢TL過程建模的思想。目前對于ETL建模問題的研究還處于起步階段，各方面的技術(shù)還不成熟，存在一定的缺陷。本文分別在概念級和邏輯級上對ETL建模問題進(jìn)行綜合分析，在此

2、基礎(chǔ)上提出了建立ETL概念模型和設(shè)計(jì)ETL邏輯架構(gòu)的方法，具體內(nèi)容如下。
　　首先，對建立ETL概念模型的方法進(jìn)行分析，發(fā)現(xiàn)現(xiàn)有的ETL概念建模方法沒有深入地闡述ETL的內(nèi)部映射結(jié)構(gòu)以及相應(yīng)轉(zhuǎn)換操作的構(gòu)建過程。因此，提出了一種新的基于結(jié)構(gòu)圖來構(gòu)建圖形化ETL概念模型的方法，該方法深入描述了ETL過程中源數(shù)據(jù)與目標(biāo)數(shù)據(jù)之間的映射關(guān)系和對應(yīng)的轉(zhuǎn)換操作。首先給出了結(jié)構(gòu)圖的定義以及結(jié)構(gòu)圖中節(jié)點(diǎn)和邊的圖形表示，并通過一個(gè)實(shí)例，詳細(xì)闡述了基于

3、結(jié)構(gòu)圖的ETL概念模型的構(gòu)建過程。
　　其次，對現(xiàn)有的ETL工具和ETL系統(tǒng)架構(gòu)的設(shè)計(jì)方法進(jìn)行研究，詳細(xì)分析了傳統(tǒng)ETL架構(gòu)的局限性以及元數(shù)據(jù)對于ETL過程的重要性，在此基礎(chǔ)上，對傳統(tǒng)的ETL架構(gòu)進(jìn)行改進(jìn)，并利用結(jié)構(gòu)圖ETL概念模型來獲取元數(shù)據(jù)信息，結(jié)合元數(shù)據(jù)管理思想，最終設(shè)計(jì)了一種新的基于元數(shù)據(jù)驅(qū)動的ETL系統(tǒng)架構(gòu)。
　　最后，設(shè)計(jì)了一個(gè)ETL元數(shù)據(jù)生成系統(tǒng)，以解決ETL元數(shù)據(jù)的提取、生成、存儲和管理，以及實(shí)現(xiàn)對ETL概念