云計(jì)算環(huán)境中分布式文件系統(tǒng)的負(fù)載均衡問題研究.pdf

1、云計(jì)算代表著未來計(jì)算機(jī)與通信技術(shù)的發(fā)展方向，而以分布式文件系統(tǒng)為代表的云存儲(chǔ)是云計(jì)算中的重要組成部分，其中負(fù)載均衡技術(shù)是云存儲(chǔ)的核心技術(shù)之一。近年來，Hadoop分布式文件系統(tǒng)(HDFS)以其高可用性和高可擴(kuò)展性等特點(diǎn)得到了業(yè)界極大的關(guān)注，是商用化集群系統(tǒng)的研究熱點(diǎn)。所以對(duì)HDFS集群的實(shí)際應(yīng)用研究具有非常重要的意義。
　　HDFS以其自身的顯著優(yōu)勢(shì)成為了目前極具應(yīng)用前景的分布式文件系統(tǒng)應(yīng)用架構(gòu)，但是因?yàn)镠DFS使用單一評(píng)價(jià)指標(biāo)與

2、單一閾值的負(fù)載均衡策略，在大型網(wǎng)站的實(shí)際應(yīng)用中，如果面對(duì)突發(fā)性與隨機(jī)性均很高的大密度、高強(qiáng)度的并發(fā)訪問時(shí)則不能應(yīng)對(duì)，會(huì)出現(xiàn)服務(wù)器系統(tǒng)癱瘓的狀況。所以，研究解決如何為HDFS設(shè)計(jì)適應(yīng)此特定應(yīng)用場(chǎng)景的負(fù)載均衡策略。
　　論文在分析了HDFS相關(guān)核心代碼的基礎(chǔ)上，提出了改進(jìn)算法，采用了基于負(fù)載遷移的閾值策略。論文首先根據(jù)應(yīng)用場(chǎng)景說明了選用的多評(píng)價(jià)指標(biāo)以及給出了評(píng)價(jià)指標(biāo)的計(jì)算方法。其次，分析了評(píng)價(jià)函數(shù)的常用形式，并依據(jù)特定的應(yīng)用，說明了選

3、用加權(quán)和形式的評(píng)價(jià)函數(shù)的有效性。再次，引入多屬性決策理論的相關(guān)方法，結(jié)合負(fù)載評(píng)價(jià)函數(shù)權(quán)向量的計(jì)算，最終確定了評(píng)價(jià)函數(shù)。最后，針對(duì)HDFS單一閾值策略的顯著缺陷，提出了雙閾值策略，并定義了服務(wù)器負(fù)載遷移方案，從而完成了整個(gè)改進(jìn)算法的設(shè)計(jì)。
　　論文通過編程，在HDFS中具體實(shí)現(xiàn)了所提出的改進(jìn)算法，并設(shè)計(jì)了算法性能測(cè)試實(shí)驗(yàn)，驗(yàn)證了改進(jìn)算法的有效性。
　　分析結(jié)果表明，改進(jìn)的負(fù)載均衡算法有助于HDFS在高強(qiáng)度突發(fā)和隨機(jī)負(fù)載的情況下