基于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)追加技術(shù)的研究與應(yīng)用.pdf

1、由于計(jì)算機(jī)應(yīng)用的飛速發(fā)展，數(shù)據(jù)倉(cāng)庫(kù)技術(shù)成為IT業(yè)界的熱門研究方向之一。隨著市場(chǎng)不斷提出新需求，數(shù)據(jù)倉(cāng)庫(kù)急需高性能的、可靠的數(shù)據(jù)追加方案，以對(duì)各數(shù)據(jù)庫(kù)中數(shù)據(jù)進(jìn)行有效的管理，為數(shù)據(jù)倉(cāng)庫(kù)提供準(zhǔn)確的數(shù)據(jù)，提高數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用于數(shù)據(jù)分析和決策支持的正確性和有效性。 針對(duì)上述問(wèn)題，本文在分析數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)追加技術(shù)的相關(guān)理論基礎(chǔ)上，綜合當(dāng)前主要的數(shù)據(jù)追加方案的優(yōu)缺點(diǎn)，提出了一種結(jié)合物化視圖、日志、工作流等技術(shù)的數(shù)據(jù)追加方案TVL(Time-Vie

2、w-Log)，并將該方案應(yīng)用于“江西省政府決策支持綜合服務(wù)系統(tǒng)”項(xiàng)目中，取得了較好的效果。論文研究的主要內(nèi)容及成果包括以下幾個(gè)方面： 第一，在分析數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)追加技術(shù)的現(xiàn)狀及難點(diǎn)、闡述數(shù)據(jù)追加方案特點(diǎn)的基礎(chǔ)上，提出了一種新的數(shù)據(jù)追加方案TVL(Time-View-Log)，并將其應(yīng)用于數(shù)據(jù)倉(cāng)庫(kù)體系架構(gòu)中； 第二，結(jié)合物化視圖、日志、時(shí)間戳等技術(shù)，完成了在ETL過(guò)程中數(shù)據(jù)遷移和數(shù)據(jù)清洗，提高了數(shù)據(jù)質(zhì)量和ETL速度，降低了