集群監(jiān)控中的數(shù)據(jù)采集技術(shù)研究.pdf

1、當(dāng)前集群系統(tǒng)已經(jīng)成為高性能計(jì)算機(jī)體系結(jié)構(gòu)發(fā)展的趨勢(shì)，但在實(shí)際中應(yīng)用集群系統(tǒng)時(shí)為便于對(duì)集群進(jìn)行管理維護(hù)，需要能對(duì)構(gòu)成集群的各個(gè)結(jié)點(diǎn)以及相關(guān)設(shè)備的狀態(tài)進(jìn)行實(shí)時(shí)監(jiān)控。因此研究集群監(jiān)控中的數(shù)據(jù)采集技術(shù)并設(shè)計(jì)一個(gè)監(jiān)控系統(tǒng)對(duì)集群技術(shù)的發(fā)展和應(yīng)用具有重要的現(xiàn)實(shí)意義。 以Lustre存儲(chǔ)集群為背景，對(duì)存儲(chǔ)集群環(huán)境下的遠(yuǎn)程監(jiān)控技術(shù)進(jìn)行了分析，并在此基礎(chǔ)上實(shí)現(xiàn)了一個(gè)針對(duì)Lustre存儲(chǔ)集群的監(jiān)控系統(tǒng)原型ClusterMonitor。ClusterM

2、onitor集群監(jiān)控系統(tǒng)基于CIM/WBEM（Common Information Model/Web Based Enterprise Management）架構(gòu)，由節(jié)點(diǎn)駐留程序MonDaemon，監(jiān)控服務(wù)端程序MonServer，遠(yuǎn)程用戶程序MonGui三個(gè)部分組成。對(duì)CIM/WBEM架構(gòu)的遵循使得ClusterMonitor具有良好的可擴(kuò)展性，而且不再依賴于傳統(tǒng)的數(shù)據(jù)庫。 監(jiān)控?cái)?shù)據(jù)采集包括監(jiān)控?cái)?shù)據(jù)的獲取和監(jiān)控?cái)?shù)據(jù)的匯集。監(jiān)

3、控?cái)?shù)據(jù)獲取方面，設(shè)計(jì)了一個(gè)基于Linux內(nèi)核模塊的內(nèi)核態(tài)監(jiān)控?cái)?shù)據(jù)獲取方案，可以通過一個(gè)統(tǒng)一接口獲取所有監(jiān)控?cái)?shù)據(jù)，并且不需要解析文本文件；監(jiān)控?cái)?shù)據(jù)匯集方面，為適應(yīng)大規(guī)模集群監(jiān)控的需要，設(shè)計(jì)了一個(gè)二叉樹自收斂的監(jiān)控?cái)?shù)據(jù)匯集協(xié)議，采用這種協(xié)議節(jié)點(diǎn)能自動(dòng)發(fā)現(xiàn)數(shù)據(jù)匯集代理并產(chǎn)生優(yōu)化的匯集路徑。 通過實(shí)驗(yàn)以對(duì)內(nèi)存信息的獲取為例驗(yàn)證了內(nèi)核態(tài)監(jiān)控?cái)?shù)據(jù)獲取方案的可行性，對(duì)二叉樹自收斂匯集協(xié)議的定量分析表明了將該匯集協(xié)議應(yīng)用于大規(guī)模的集群監(jiān)控時(shí)將具