基于因子分析的數(shù)據(jù)質量評估.pdf

1、近年來，我國金融業(yè)、保險業(yè)、電信行業(yè)紛紛投入大量的精力、財力著手進行數(shù)據(jù)倉庫項目的建設，它使人們從一個全新的角度認識到信息系統(tǒng)的重要性，也使人們發(fā)現(xiàn)了歷史數(shù)據(jù)的價值。從此數(shù)據(jù)不僅僅用于檢索，還可以用來分析整個企業(yè)(或組織)的運行狀態(tài)以及未來的發(fā)展趨勢，為決策和管理提供支持。但同時也發(fā)現(xiàn)一致、清晰、準確且可訪問性、可用性較好的數(shù)據(jù)是數(shù)據(jù)倉庫系統(tǒng)的基礎。如何在數(shù)據(jù)倉庫體系結構基礎上進行集成和擴充，形成與數(shù)據(jù)倉庫自身體系相適應的數(shù)據(jù)質量檢測控

2、制體系成為急需解決的問題。作為集團成員之一的湖北電信，決定以Teradada數(shù)據(jù)倉庫平臺為基礎，并輔以Teradata Warehouse Miner數(shù)據(jù)挖掘解決方案，建立一套省級經營分析和決策支持系統(tǒng)，通過集中、穩(wěn)定地整合全省1，800多萬用戶的數(shù)據(jù)信息，基于Teradata構建起以客戶為核心的統(tǒng)一企業(yè)數(shù)據(jù)視圖，以逐步實現(xiàn)由外延式發(fā)展向內涵式發(fā)展的轉變。
　　 本研究分析了目前的主要數(shù)據(jù)質量評估方法，指出了相對于業(yè)務系統(tǒng)而言，

3、數(shù)據(jù)倉庫環(huán)境下的數(shù)據(jù)質量評估的不同特點，即數(shù)據(jù)倉庫中數(shù)據(jù)質量的時變特征、數(shù)據(jù)倉庫中數(shù)據(jù)質量的放大效應及數(shù)據(jù)倉庫中數(shù)據(jù)質量的用戶角色特征，提出了基于因子分析數(shù)據(jù)質量評估模型。使用數(shù)據(jù)倉庫中出現(xiàn)的數(shù)據(jù)質量問題作為初始變量，使用因子分析的方法抽象出數(shù)據(jù)質量評估指標，以及這些評估指標對數(shù)據(jù)質量的貢獻率。將數(shù)據(jù)質量評估指標與數(shù)據(jù)倉庫中的角色對應，利用因子分析的結果，更好地指導各種角色抓住主要矛盾，規(guī)范操作流程，從而保證數(shù)據(jù)倉庫的數(shù)據(jù)質量。建立了數(shù)