基于分布式計(jì)算的網(wǎng)絡(luò)流量異常檢測系統(tǒng).pdf

1、隨著網(wǎng)絡(luò)的開放性、共享性及互聯(lián)程度的擴(kuò)大，網(wǎng)絡(luò)的重要性以及對社會(huì)的影響也越來越大。Internet的迅速發(fā)展給人們帶來巨大方便的同時(shí)，也使我們面臨著各種安全事件的威脅。據(jù)統(tǒng)計(jì)，近年來針對網(wǎng)絡(luò)資源的各種攻擊帶來了巨大的經(jīng)濟(jì)損失。異常檢測作為網(wǎng)絡(luò)的安全防護(hù)體系逐漸成為網(wǎng)絡(luò)安全領(lǐng)域的研究重點(diǎn)。
　　 互聯(lián)網(wǎng)時(shí)代的數(shù)據(jù)是龐大的，尤其是大規(guī)模網(wǎng)絡(luò)的數(shù)據(jù)流量，能夠快速而精確地從海量日志數(shù)據(jù)源中檢測出異常的系統(tǒng)具有很好的市場前景。本文針對大量

2、數(shù)據(jù)，提出了結(jié)合分布式計(jì)算思想進(jìn)行并行處理的方法，介紹了開源軟件平臺(tái)Hadoop在分布式并行計(jì)算方面的優(yōu)點(diǎn)，實(shí)現(xiàn)了數(shù)據(jù)預(yù)處理的具體應(yīng)用并進(jìn)行了相關(guān)實(shí)驗(yàn)。接著從對流量異常分類的研究入手，通過對目前主要的流量攻擊的攻擊特征的分析，根據(jù)信息熵的定義，得出網(wǎng)絡(luò)信息熵能應(yīng)用于網(wǎng)絡(luò)流量異常檢測。系統(tǒng)設(shè)計(jì)了基于網(wǎng)絡(luò)信息熵的算法，結(jié)合統(tǒng)計(jì)學(xué)中的主成分分析法和子空間方法，共同實(shí)現(xiàn)了對網(wǎng)絡(luò)流量異常的檢測。
　　 本文所實(shí)現(xiàn)的實(shí)際系統(tǒng)包括數(shù)據(jù)預(yù)處理模