數(shù)據(jù)倉庫系統(tǒng)中若干關鍵技術的研究.pdf

1、東北大學博士學位論文數(shù)據(jù)倉庫系統(tǒng)中若干關鍵技術的研究姓名：鮑玉斌申請學位級別：博士專業(yè)：計算機軟件與理論指導教師：于戈20030801東北大學博士學位論文摘要提供了數(shù)據(jù)完整性分析、數(shù)據(jù)集成工具、數(shù)據(jù)轉(zhuǎn)換工具、統(tǒng)計分析工具和數(shù)據(jù)挖掘工具。同時，針對數(shù)據(jù)倉庫是多數(shù)據(jù)源的集成產(chǎn)品，提出了數(shù)據(jù)倉庫中數(shù)據(jù)集成框架。該框架給出了關系模式的兩級語義沖突分類，即模式結(jié)構(gòu)沖突和元組實例沖突，給出了解決這兩級語義沖突的解決策略。第三，本文討論了數(shù)據(jù)倉庫設計

2、中的維度縮減的基本概念，給出了按維度縮減算法的功能進行算法分類，即剔除冗余屬性的算法、剔除不相關屬性的算法和綜合算法，提出了基于分形維的快速維度縮減算法，該方法利用分形維作為屬性子集的優(yōu)度度量準則。該方法可以剔除無監(jiān)督數(shù)據(jù)集中的冗余屬性，只需掃描～遍數(shù)據(jù)集就可以得到滿足精度要求的屬性子集。實驗研究發(fā)現(xiàn)，該算法具有很好的維度可擴展性。在數(shù)據(jù)倉庫的運行與維護管理的研究中，首先，討論了數(shù)據(jù)倉庫的數(shù)據(jù)更毅和維護技術，提出了視圖定義改變后的數(shù)據(jù)集

3、市增量更新策略。主要針對sELEcT_】限OMⅥ啊ERE視圖的幾種基本改變方式，設計了即考慮模式定義改變又考慮視圖的底層數(shù)據(jù)源有數(shù)據(jù)增量的視圖維護和改寫算法。其次，由于數(shù)據(jù)倉庫中數(shù)據(jù)處理程序眾多，尤其是在企業(yè)級數(shù)據(jù)倉庫系統(tǒng)中，如何調(diào)度任務的運行是數(shù)據(jù)倉庫管理員面臨的巨大問題。采用工作流的思想，設計提出了企業(yè)級數(shù)據(jù)倉庫的任務調(diào)度策略以及設計出了自動任務調(diào)度框架。該框架收集系統(tǒng)中的各種數(shù)據(jù)處理任務，根據(jù)應用領域的相關規(guī)則，自動獲取任務的輸入

4、和輸出，進而形成任務流圖，進而調(diào)度和監(jiān)視任務的執(zhí)行，并進行了實驗模擬研究。最后，本文設計并實現(xiàn)了一個基于客戶／N務器方式的以數(shù)據(jù)倉庫為數(shù)據(jù)源的ROLAP原型系統(tǒng)，并使用OLAP的Benchmark進行性能測試。該系統(tǒng)在Windows環(huán)境下，使用vC、CBuilder和OBDC接口實現(xiàn)的，支持多種數(shù)據(jù)庫平臺。本系統(tǒng)是國家863計劃資助項目的一部分，項目通過了國家863專家組的驗收和遼寧省科技廳組織的成果鑒定。關鍵字；數(shù)據(jù)倉庫，數(shù)據(jù)集市，聯(lián)