電信企業(yè)數(shù)據(jù)倉庫建設(shè)

1、數(shù)據(jù)庫《郵電規(guī)劃》2003年第5期38電信企業(yè)數(shù)據(jù)倉庫建設(shè)貴州省移動通信公司茍茹辛1電信企業(yè)信息化現(xiàn)狀從上世紀八十年代開始，我國電信企業(yè)開始進行大規(guī)模的信息化建設(shè)，在近二十年的時間中，電信企業(yè)已全面實現(xiàn)了生產(chǎn)及服務過程信息化。隨著業(yè)務不斷趨于多樣化，各電信企業(yè)都針對不同業(yè)務建立了多個生產(chǎn)管理系統(tǒng)，如中國電信建設(shè)的生產(chǎn)系統(tǒng)就包括了進行業(yè)務受理、配線配號、工單管理的“97”系統(tǒng)；進行計費、帳務及欠費處理的計費系統(tǒng)；114、112、180、1

2、89等專業(yè)系統(tǒng)；201、IC等卡類管理系統(tǒng)；基于互聯(lián)網(wǎng)信息管理的數(shù)據(jù)業(yè)務管理系統(tǒng)以及交換、傳輸、網(wǎng)管系統(tǒng)等。中國移動也建設(shè)了綜合業(yè)務支撐（BOSS）系統(tǒng)；用于夢網(wǎng)短信接入的短信網(wǎng)關(guān)、彩信網(wǎng)關(guān)、GPRS網(wǎng)關(guān)等各專業(yè)管理系統(tǒng)。目前，電信企業(yè)建設(shè)的項目仍然以生產(chǎn)支撐系統(tǒng)為主。通過這些支撐系統(tǒng)的建設(shè)，規(guī)范了電信企業(yè)內(nèi)部管理流程，大大提高了電信企業(yè)的工作效率，增強了業(yè)務水平，提高了企業(yè)的競爭力。隨著市場競爭的不斷加劇，對客戶資源的爭奪也進入了白熱

3、化的階段，如何發(fā)展新用戶，擴大自己的用戶群；如何設(shè)計出更適合用戶需要的業(yè)務，將用戶綁定在自己的網(wǎng)絡上；如何合理地設(shè)定資費在用戶可以接受的水平；一個個問題擺在了電信運營商的面前。在激烈的市場競爭面前，要想科學的決策，離不開數(shù)據(jù)的支持。電信運營商們在建立各項系統(tǒng)的過程中，也積累了大量的資料數(shù)據(jù)，如用戶的通話記錄，短信發(fā)送記錄，用戶上網(wǎng)記錄，用戶資料變更記錄，用戶投訴記錄，網(wǎng)絡運行記錄等。通過對這些數(shù)據(jù)進行分析，可以掌握企業(yè)的運營狀況，為企業(yè)

4、科學、準確的決策提供依據(jù)。但在使用這些數(shù)據(jù)的過程中，也存在以下幾個問題：⑴數(shù)據(jù)量大、數(shù)據(jù)來源廣以用戶數(shù)近300萬的某電信運營商為例，每天產(chǎn)生的僅通話話單數(shù)就達數(shù)千萬條；這還不包括其它生產(chǎn)環(huán)節(jié)如客服、網(wǎng)管等所產(chǎn)生的運營數(shù)據(jù)；而經(jīng)營管理所牽涉的數(shù)據(jù)除此以外還包括了內(nèi)部管理的人力、財務、以及與企業(yè)相關(guān)的外部環(huán)境數(shù)據(jù)。⑵各業(yè)務部門對數(shù)據(jù)的理解存在偏差，定義不統(tǒng)一，導致數(shù)據(jù)可信度無法保證。對單個業(yè)務部門來說可能是合法的數(shù)據(jù)，但由于缺乏信息的集成和

5、整合，導致整個企業(yè)對數(shù)據(jù)的含義、數(shù)值及使用方式產(chǎn)生歧義。⑶每個系統(tǒng)都有獨立的報表系統(tǒng)，隨著需求的變化和統(tǒng)計項目的變化，使得報表的修改相對比較困難；尤其目前很多在用系統(tǒng)的報表都固化在程序中，給今后的修改帶來諸多不便。⑷對于一些需要跨平臺才能進行的分析，由于平臺不一致，應用系統(tǒng)之間數(shù)據(jù)定義也不一致，又沒有實現(xiàn)數(shù)據(jù)共享，很難進行關(guān)聯(lián)分析；并且，一個企業(yè)內(nèi)部，不同系統(tǒng)平臺之間的數(shù)據(jù)存在較大的冗余，增加了維護工作量，并可能造成系統(tǒng)資源的浪費。⑸在

6、生產(chǎn)系統(tǒng)上進行統(tǒng)計分析會影響到正常生產(chǎn)系統(tǒng)運轉(zhuǎn)。由于生產(chǎn)系統(tǒng)的時效性要求較高，需要大量的系統(tǒng)資源進行保障，為確保生產(chǎn)系統(tǒng)安全穩(wěn)定運行，有必要將統(tǒng)計、分析等對時效性要求相對較低的決策支持系統(tǒng)從生產(chǎn)系統(tǒng)分離。數(shù)據(jù)庫《郵電規(guī)劃》2003年第5期40數(shù)據(jù)總稱。這些數(shù)據(jù)是構(gòu)建數(shù)據(jù)倉庫系統(tǒng)的基礎(chǔ)是整個系統(tǒng)的數(shù)據(jù)源泉。數(shù)據(jù)的存儲與管理：數(shù)據(jù)倉庫的存儲主要由元數(shù)據(jù)的存儲及數(shù)據(jù)的存儲兩部分組成。元數(shù)據(jù)是關(guān)于數(shù)據(jù)的數(shù)據(jù)，其內(nèi)容主要包括數(shù)據(jù)倉庫的數(shù)據(jù)字典、數(shù)

7、據(jù)的定義、數(shù)據(jù)的抽取規(guī)則、數(shù)據(jù)的轉(zhuǎn)換規(guī)則、數(shù)據(jù)加載頻率等信息。各操作數(shù)據(jù)庫中的數(shù)據(jù)按照元數(shù)據(jù)庫中定義的規(guī)則，經(jīng)過抽取、清理、轉(zhuǎn)換、集成，按照主題重新組織，依照相應的存儲結(jié)構(gòu)進行存儲。也可以面向應用建立一些數(shù)據(jù)集市，數(shù)據(jù)集市可以看作是數(shù)據(jù)倉庫的一個子集，它含有較少的主題域且歷史時間更短數(shù)據(jù)量更少，一般只能為某個局部范圍內(nèi)的管理人員服務，因此也稱之為部門級數(shù)據(jù)倉庫。數(shù)據(jù)的訪問：由OLAP(聯(lián)機分析處理)、數(shù)據(jù)挖掘、統(tǒng)計報表、即席查詢等幾部分

8、組成。例如OLAP：針對特定的分析主題，設(shè)計多種可能的觀察形式，設(shè)計相應的分析主題結(jié)構(gòu)（即進行事實表和維表的設(shè)計），使管理決策人員在多維數(shù)據(jù)模型的基礎(chǔ)上進行快速、穩(wěn)定和交互性的訪問，并進行各種復雜的分析和預測工作。按照存儲方式來分，OLAP可以分成MOLAP以及ROLAP等方式MOLAP(MultiDimensionOLAP)將OLAP分析所需的數(shù)據(jù)存放在多維數(shù)據(jù)庫中。分析主題的數(shù)據(jù)可以形成一個或多個多維立方體。ROLAP(Relati

9、onalOLAP)將OLAP分析所需的數(shù)據(jù)存放在關(guān)系型數(shù)據(jù)庫中。分析主題的數(shù)據(jù)以“事實表維表”的星型模式組織。3.23.2數(shù)據(jù)倉庫環(huán)境建立的過程數(shù)據(jù)倉庫的開發(fā)生命周期不同于操作型數(shù)據(jù)庫系統(tǒng)的開發(fā)生命周期，傳統(tǒng)的系統(tǒng)開發(fā)生命周期（SDLC）是由需求驅(qū)動的，首先必須理解需求，在進行設(shè)計和開發(fā)；而數(shù)據(jù)倉庫的開發(fā)遵循CLDS也就是“螺旋式”開發(fā)方法，即由數(shù)據(jù)開始，獲取數(shù)據(jù)后，將數(shù)據(jù)進行集成并檢查數(shù)據(jù)的準確性，針對數(shù)據(jù)進行編程，但得到最后結(jié)果后，

10、系統(tǒng)的需求才得到理解。因此數(shù)據(jù)倉庫環(huán)境是按照反復開發(fā)方式建立起來，即首先建立系統(tǒng)的一小部分，然后再建一部分，一直按相同的路徑反復進行開發(fā)，以“總體規(guī)劃、分步實施、步步見效”為原則。一般來說，建立數(shù)據(jù)倉庫遵循以下四個步驟：(1)充分了解企業(yè)決策層的需求；明確企業(yè)關(guān)心的主題域，并按照優(yōu)先級進行劃分；(2)按數(shù)據(jù)倉庫方法設(shè)計數(shù)據(jù)倉庫結(jié)構(gòu)；(3)實現(xiàn)業(yè)務操作系統(tǒng)及外部數(shù)據(jù)源的數(shù)據(jù)向數(shù)據(jù)倉庫的遷移（ETL）；(4)面向應用建立數(shù)據(jù)集市，滿足企業(yè)決

11、策需求；(5)通過信息展現(xiàn)工具以可視化手段提供給企業(yè)內(nèi)各級信息客戶使用。數(shù)據(jù)倉庫的開發(fā)是一個高風險的項目，在建設(shè)過程中，可考慮以數(shù)據(jù)倉庫示范項目的形式展開，通過面向一兩個關(guān)鍵業(yè)務的開發(fā)，以保證建設(shè)的重點突出和范圍適中以及成功率。一旦成功地建設(shè)了示范項目，將增加技術(shù)人員和業(yè)務人員的信心，為業(yè)務問題和技術(shù)問題之間達到平衡摸索一套經(jīng)驗，這樣有助于整個項目在一個可控制的狀態(tài)下實施。同時示范項目也是數(shù)據(jù)倉庫進一步開發(fā)的組成部分，通過類似于示范項目