實時數(shù)據(jù)倉庫中查詢與更新調度策略的研究與實現(xiàn).pdf

1、隨著信息技術的飛速發(fā)展，企業(yè)或組織的信息化建設不斷深入，企業(yè)或組織搜集了大量的數(shù)據(jù)信息，需要數(shù)據(jù)倉庫提供決策支持。為增強市場競爭優(yōu)勢或提升社會安全保障能力，企業(yè)或組織對數(shù)據(jù)倉庫的實時性提出了越來越高的要求，但傳統(tǒng)數(shù)據(jù)倉庫不能滿足這種實時性需求。因此，出現(xiàn)了提供實時決策支持的實時數(shù)據(jù)倉庫系統(tǒng)。在實時數(shù)據(jù)倉庫應用領域，決策者期望短的響應時間和高的數(shù)據(jù)新鮮度。然而，由于存在高負載和可能發(fā)生沖突的連續(xù)查詢與更新任務，實時數(shù)據(jù)倉庫同時滿足決策者的

2、上述兩個需求具有極大的挑戰(zhàn)性，但具有實用價值。如何有效提高用戶需求的滿意度是一個亟待解決的問題。因此，實時數(shù)據(jù)倉庫體系結構和查詢與更新實時調度算法成為研究的熱點，并具有重要意義。
　　本文首先全面分析了現(xiàn)有的實時數(shù)據(jù)倉庫體系結構，確定了更新任務與查詢任務的負載分布情況，利用副本機制將實時性更新任務的轉換過程與OLTP系統(tǒng)相分離，以減少實時更新對OLTP系統(tǒng)性能的影響。然后提出了改進的基于ODS實時數(shù)據(jù)倉庫體系結構，分類處理實時更新

3、任務，利用基于觸發(fā)器的實時捕獲方法，采用不同的映射和裝載機制。該方案可以盡可能實時地裝載更新數(shù)據(jù)，從而提高查詢結果新鮮度。本文將不能實時裝載的任務放于更新任務隊列，將用戶提交的查詢任務放于查詢任務隊列。對于以上的兩種任務，本文提出了基于用戶意愿的查詢與更新二級調度算法，允許用戶指出可接受的查詢響應時間即服務質量，和可以接受的結果陳舊度即數(shù)據(jù)質量，并詳細介紹了此二級調度策略思想以及實現(xiàn)方法。最后，利用TPC-DS基準對本文中提出的體系結構