一種面向海量數(shù)據(jù)綜合評價的樹狀數(shù)據(jù)結(jié)構(gòu)的設(shè)計與研究.pdf

1、隨著當前計算機技術(shù)、網(wǎng)絡(luò)、多媒體技術(shù)、通訊等技術(shù)的飛速發(fā)展，各類日常生活中充斥的大量數(shù)字資源遍布的專門業(yè)務(wù)系統(tǒng)，那么在如今數(shù)字化日益普及的今天，數(shù)據(jù)挖掘顯得尤為重要，要利用計算機在這些大量的數(shù)據(jù)中進行有針對性的挖掘。譬如政府管理部門、大型企事業(yè)單位很多時候不需要也不可能去查閱全部的數(shù)據(jù)，而是需要從宏觀的層面掌握這些數(shù)據(jù)所反映的事實，就要使用相應(yīng)的數(shù)據(jù)挖掘方法，在現(xiàn)今眾多的挖掘法中，其中有一類宏觀的數(shù)據(jù)挖掘采用統(tǒng)計學中的綜合評價方法。稱面

2、向海量數(shù)據(jù)，使用綜合評價方法，利用計算機進行數(shù)據(jù)挖掘的系統(tǒng)為海量數(shù)據(jù)的綜合評價計算系統(tǒng)。
　　 數(shù)據(jù)挖掘，指的是從大量原始數(shù)據(jù)中，這些數(shù)據(jù)可能不完整的、模糊的、隨機的，提取其中有潛在價值的、能被人們利用和理解的信息和知識的過程。
　　 綜合評價是指針對多屬性體系結(jié)構(gòu)描述的對象系統(tǒng)做出全局性、整體性的評價。綜合評價又可分為綜合評價方法及評價指標體系兩類問題。其中前者在管理科學中已經(jīng)有了大量的研究及成果；后者則與具體應(yīng)用關(guān)聯(lián)

3、比較大。目前，針對海量數(shù)據(jù)，特別是實時到達的流數(shù)據(jù)系統(tǒng)的指標體系計算系統(tǒng)尚沒有成熟的模型。指標體系計算系統(tǒng)應(yīng)該包括建模、挖掘及指標綜合三部分。
　　 在海量數(shù)據(jù)的綜合評價中，用直觀量化的數(shù)值指標來反映事物的屬性。當分析某一事物時，實際上是從某一視角的不同方面分開來認識事物的，所以一個屬性的指標值，可以用若干個子指標值來更詳細地描述。對指標值多次細分后，指標體系就形成了一個樹狀的體系結(jié)構(gòu)，本文提出的樹狀概要數(shù)據(jù)結(jié)構(gòu)就是針對這種樹狀

4、指標體系而設(shè)計的。
　　 在數(shù)據(jù)實時到達、規(guī)模無法預(yù)知的背景下，流數(shù)據(jù)庫技術(shù)于20世紀末應(yīng)運而生，在金融應(yīng)用、網(wǎng)絡(luò)監(jiān)視、通信數(shù)據(jù)管理、Web應(yīng)用、傳感器網(wǎng)絡(luò)數(shù)據(jù)處理等領(lǐng)域被廣泛應(yīng)用。但是，現(xiàn)有的流數(shù)據(jù)技術(shù)還無法方便地應(yīng)用在指標體系計算這一特定領(lǐng)域。雖然“基于數(shù)據(jù)倉庫的指標體系研究”提出了一種統(tǒng)一的方式來描述指標結(jié)構(gòu)，將指標存放在數(shù)據(jù)倉庫中再進一步挖掘，但沒有考慮相關(guān)數(shù)據(jù)庫表、計算環(huán)境的自動構(gòu)建及可配置性，沒有考慮直接從流數(shù)據(jù)中統(tǒng)