應(yīng)用于網(wǎng)絡(luò)監(jiān)控系統(tǒng)的數(shù)據(jù)庫設(shè)計與實現(xiàn)研究.pdf

1、信息時代，互聯(lián)網(wǎng)的發(fā)展對于數(shù)據(jù)庫技術(shù)的要求更高，在海量的數(shù)據(jù)信息量條件下，用戶越來越關(guān)注穩(wěn)定、高效的數(shù)據(jù)層解決方案。
　　本文背景為企業(yè)員工網(wǎng)絡(luò)行為監(jiān)控，系統(tǒng)使用LAMP架構(gòu)進(jìn)行開發(fā)。系統(tǒng)采用了Linux系統(tǒng)下運行效率較高的MySQL數(shù)據(jù)庫，來保存網(wǎng)絡(luò)行為日志信息。對于讀寫頻繁的大規(guī)模日志數(shù)據(jù)，考慮數(shù)據(jù)庫的設(shè)計以及性能優(yōu)化，從而使監(jiān)控網(wǎng)絡(luò)行為的數(shù)據(jù)庫高效、穩(wěn)定地運行，將是本文的工作目的。
　　為提高海量數(shù)據(jù)的查詢效率，文中設(shè)

2、計了按照數(shù)據(jù)拆分的動靜隔離架構(gòu)。亦即將日志數(shù)據(jù)拆分為靜態(tài)數(shù)據(jù)與活躍數(shù)據(jù)（歷史與實時日志），采用任務(wù)定時調(diào)度將活躍數(shù)據(jù)復(fù)制為靜態(tài)數(shù)據(jù)，進(jìn)而使用表分區(qū)技術(shù)，對日志按時間粒度進(jìn)行表分區(qū)。對頻繁訪問且數(shù)據(jù)量不大的基礎(chǔ)數(shù)據(jù)表，采用內(nèi)存表與磁盤表并存的方式進(jìn)行數(shù)據(jù)保存，從而使表的連接效率得到提高。在監(jiān)控策略制定模塊中，采用了靈活的監(jiān)控策略表設(shè)計，對各個被控對象或組，使用模板形式應(yīng)用策略到被控對象中，并制定了應(yīng)用的組優(yōu)先監(jiān)控策略，管理員方便操作。設(shè)計

3、了一組高效、合理的數(shù)據(jù)庫Schema。
　　對于優(yōu)化Query，本文分析Query語句頻度較高的explain執(zhí)行計劃，進(jìn)行了合適的索引設(shè)計。而不太適合索引建立的數(shù)據(jù)列，則設(shè)計了分類數(shù)據(jù)模型，亦即按照數(shù)據(jù)表的列屬性，對于數(shù)據(jù)進(jìn)行一維或二維關(guān)系分類，保存為視圖方式;通過相對應(yīng)數(shù)據(jù)子集的匹配，來實現(xiàn)語句重組查詢，替代原Query語句。測試結(jié)果表明，優(yōu)化Query后，由于回避了全表掃描造成的響應(yīng)時間延遲，比優(yōu)化前查詢效率得到了大幅度提高