數(shù)據(jù)倉庫中實時抽取機制的研究與實現(xiàn).pdf

1、為了提高決策科學(xué)化水平，電信企業(yè)也紛紛構(gòu)建了以數(shù)據(jù)倉庫系統(tǒng)為核心的經(jīng)營分析系統(tǒng)，為企業(yè)的決策提供管理信息。然而，經(jīng)營分析系統(tǒng)不能實時地根據(jù)變化數(shù)據(jù)產(chǎn)生信息，進而支持企業(yè)日常管理所需的結(jié)構(gòu)化決策行為，無法將恰當(dāng)?shù)男畔⒃谇‘?dāng)?shù)臅r間傳遞給恰當(dāng)?shù)娜?，因此，?dāng)信息越來越多時，決策者利用信息卻變得越來越困難。主動實時數(shù)據(jù)倉庫技術(shù)可以支持這個問題的解決，變化數(shù)據(jù)捕獲是其中的關(guān)鍵技術(shù)。 本文利用數(shù)據(jù)庫在線日志技術(shù)，給出了一個基于消息隊列的變化數(shù)

2、據(jù)捕獲框架，能夠支持實時從生產(chǎn)系統(tǒng)捕獲變化數(shù)據(jù)，按照預(yù)定格式進行轉(zhuǎn)換后經(jīng)過消息中間件傳送到目的端，由目的端應(yīng)用代理對消息進行接收和處理。并在此基礎(chǔ)上設(shè)計了一個事件處理模型，該模型根據(jù)變化的數(shù)據(jù)產(chǎn)生事件，并主動驅(qū)動后續(xù)的ETL過程，實時地生成管理信息，結(jié)合發(fā)布/訂閱機制，可以很好地解決信息實時生成、主動推送問題，進而為自動化日常結(jié)構(gòu)決策行為提供支持。整個框架處理過程都是由事件驅(qū)動的，形成一個實時決策分析的閉環(huán)。整個過程是一個動態(tài)的發(fā)現(xiàn)處理