DNS流量及服務(wù)規(guī)模計算子系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、近年來，DNS服務(wù)體系頻頻遭到攻擊，針對域名系統(tǒng)的惡意活動屢屢出現(xiàn)，因此，網(wǎng)絡(luò)安全事件分析人員需要掌握DNS服務(wù)體系的運行狀況，篩選基于或針對域名系統(tǒng)的惡意活動。網(wǎng)絡(luò)安全事件分析人員需要一個能夠?qū)τ蛎麛?shù)據(jù)進行分析的工具，通過對DNS流量和DNS服務(wù)規(guī)模的統(tǒng)計和分析，挖掘出DNS服務(wù)體系中的異常狀態(tài)，到達域名安全監(jiān)測的目的。本文主要介紹對DNS流量和DNS服務(wù)規(guī)模的計算方法，使他能夠為后續(xù)的分析工作提供必要的數(shù)據(jù)準備。本文同時提出了大數(shù)據(jù)

2、環(huán)境下計算DNS流量和服務(wù)規(guī)模性能上的解決方案。
　　本文使用Java語言開發(fā)了DNS計算子系統(tǒng)，數(shù)據(jù)來源于DNS分析人員從骨干網(wǎng)或域名服務(wù)器上采集DNS請求和應(yīng)答報文，經(jīng)過剝離IPv4/IPv6數(shù)據(jù)包頭，提取DNS請求或響應(yīng)內(nèi)容的日志數(shù)據(jù)。報文主要來自客戶端和遞歸域名服務(wù)器之間，遞歸域名服務(wù)器和權(quán)威域名服務(wù)器之間的請求和應(yīng)答內(nèi)容。數(shù)據(jù)為結(jié)構(gòu)化的行數(shù)據(jù)，主要字段有：源IP地址，目的IP地址，域名，解析值，時間，客戶端地理位置標識等

3、。對處理范圍內(nèi)數(shù)據(jù)的源IP地址或目的IP地址出現(xiàn)的次數(shù)進行統(tǒng)計和排序，可以得到客戶端和域名服務(wù)器的流量。對處理范圍內(nèi)數(shù)據(jù)的源IP地址或目的IP地址進行去重，可以得到客戶端數(shù)量，遞歸域名服務(wù)器數(shù)量，權(quán)威域名服務(wù)器數(shù)量用來統(tǒng)計DNS服務(wù)規(guī)模。
　　本文同時提供了對DNS流量和服務(wù)規(guī)模的實時數(shù)據(jù)計算方法以及歷史數(shù)據(jù)的批處理方法。不但完成了數(shù)據(jù)計算功能，在性能上提出了針對性的算法并作出了大量的實驗證明，尤其在海量數(shù)據(jù)重復(fù)檢測算法和Topk