基于ETL的數(shù)據(jù)集成系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著計(jì)算機(jī)技術(shù)的發(fā)展和高校信息化工作的不斷推進(jìn)，教育信息化完成了基礎(chǔ)設(shè)施的建設(shè)，高校內(nèi)擁有越來越多的應(yīng)用系統(tǒng)。這些應(yīng)用系統(tǒng)采用了不同的數(shù)據(jù)庫系統(tǒng)或多種數(shù)據(jù)存儲方式，存在大量的數(shù)據(jù)冗余、數(shù)據(jù)不一致等問題。因此數(shù)據(jù)集成系統(tǒng)的建設(shè)就迫在眉睫。 本論文是在高校數(shù)字化校園建設(shè)大背景下，以解決異構(gòu)數(shù)據(jù)集成問題和共享為目的，以東軟高校數(shù)字校園平臺建設(shè)作為項(xiàng)目實(shí)施的一個(gè)數(shù)據(jù)集成系統(tǒng)的研究、設(shè)計(jì)與實(shí)現(xiàn)。本系統(tǒng)的實(shí)現(xiàn)是基于ETL技術(shù)的，ETL即數(shù)據(jù)

2、抽取、轉(zhuǎn)換、裝載的過程。傳統(tǒng)的ETL 比較擅長于大量數(shù)據(jù)的遷移，允許數(shù)據(jù)在時(shí)間上的延遲。本文在ETL技術(shù)的基礎(chǔ)上結(jié)合傳統(tǒng)的數(shù)據(jù)集成技術(shù)，采用適配器技術(shù)和中間件技術(shù)，使得本系統(tǒng)既可以處理大批量的歷史數(shù)據(jù)，又可以實(shí)時(shí)處理小批量的變化的數(shù)據(jù)，全方位地滿足用戶對所有數(shù)據(jù)處理的需求。 本系統(tǒng)具有良好的性能和極低的錯誤率，現(xiàn)在已經(jīng)成功地在全國多所高校中得到了實(shí)施和應(yīng)用，在文中給出了詳細(xì)的應(yīng)用測試結(jié)果和分析。根據(jù)各高校的反饋意見，本文提出了