分布式數(shù)據(jù)倉庫中預聚集數(shù)據(jù)的一致性維護策略研究.pdf

1、隨著數(shù)據(jù)倉庫應用范圍的不斷擴大，集中式數(shù)據(jù)倉庫環(huán)境已不能滿足用戶的需求，分布式數(shù)據(jù)倉庫技術(shù)應運而生。分布式數(shù)據(jù)倉庫中的數(shù)據(jù)大多來源于多個分散、異構(gòu)及自治的底層業(yè)務數(shù)據(jù)庫，其信息往往以實視圖的形式分布存儲在多個結(jié)點上，其中，預聚集數(shù)據(jù)是實視圖的一個重要組成部分。預聚集數(shù)據(jù)的存在，加快了查詢響應速度，大大提高了數(shù)據(jù)倉庫的性能。然而，底層數(shù)據(jù)庫中的數(shù)據(jù)是不斷變化的，為使分布式數(shù)據(jù)倉庫中的預聚集數(shù)據(jù)能夠同步反映數(shù)據(jù)源的變化，必須對其進行及時維護

2、。
　　在介紹分布式數(shù)據(jù)倉庫及預聚集數(shù)據(jù)相關(guān)知識的基礎上，分析了脫機維護和聯(lián)機維護存在的不足，擴展了動態(tài)增量維護算法的應用范圍，提出了基于分布式數(shù)據(jù)倉庫的動態(tài)增量維護的模型及算法，分別在各分布站點上設置兩級視圖，輔助實現(xiàn)視圖的增量維護，取得了較好的效果。
　　作為聚集數(shù)據(jù)的組織形式之一--數(shù)據(jù)立方體是二維表格的多維擴展。數(shù)據(jù)立方體的形成過程就是數(shù)據(jù)聚集的過程，對聚集數(shù)據(jù)的維護可以轉(zhuǎn)化為對數(shù)據(jù)立方體的維護。在介紹多維結(jié)構(gòu)及數(shù)據(jù)

3、立方體的基礎上，通過維劃分引入維層次信息實現(xiàn)立方體的存儲，同時對數(shù)據(jù)立方體進行分段劃分，然后根據(jù)主題進行聚簇，提出了一種有利于分布式系統(tǒng)的數(shù)據(jù)立方體的存儲結(jié)構(gòu)--分布式數(shù)據(jù)立方體，使數(shù)據(jù)立方體據(jù)主題分布于分布式數(shù)據(jù)倉庫的各個節(jié)點上，采用增量式維護算法及分布式并行處理的方法，對數(shù)據(jù)進行維護，提高了數(shù)據(jù)的維護效率。
　　為了測試以往運用于集中式系統(tǒng)中的算法在分布式系統(tǒng)中的功能及效率，搭建了分布式系統(tǒng)模擬環(huán)境，以分布式數(shù)據(jù)立方體的形式對