基于RS糾刪碼的數(shù)據(jù)冗余策略.pdf

1、由于遠(yuǎn)程教育、教育資源共享是面向數(shù)據(jù)網(wǎng)絡(luò)體系結(jié)構(gòu)的，人們對(duì)教育資源的可靠性、訪問效率提出了很高的要求。教育資源的特點(diǎn)是對(duì)于較新的資源數(shù)據(jù)，往往訪問量較大，而對(duì)于歷史資源數(shù)據(jù)，訪問量很小，數(shù)據(jù)可靠性要求不高，二者的數(shù)據(jù)可用性要求差異較大。
　　本文詳細(xì)分析研究糾刪碼技術(shù)的編解碼原理、分類及在數(shù)據(jù)冗余方面的應(yīng)用，并分析分布式文件系統(tǒng)（HDFS）的相關(guān)理論知識(shí)以及數(shù)據(jù)冗余策略的功能與分類。根據(jù)教育資源管理的特點(diǎn)，不同時(shí)期的教育資源訪問量

2、差異較大，繼而二者的數(shù)據(jù)可用性要求較大，而傳統(tǒng)系統(tǒng)中數(shù)據(jù)冗余策略采用默認(rèn)的3副本冗余策略，存在存儲(chǔ)開銷過高，節(jié)點(diǎn)負(fù)載不均衡的問題，為了解決以上問題，提出基于RS糾刪碼的動(dòng)態(tài)副本放置策略。首先，針對(duì)教育資源數(shù)據(jù)的特點(diǎn)，將默認(rèn)的3副本冗余策略調(diào)整為根據(jù)訪問量計(jì)算熱度，參照熱度級(jí)別，實(shí)時(shí)調(diào)整文件副本數(shù)量。解決了高訪問量所帶來的節(jié)點(diǎn)負(fù)載不均衡和存儲(chǔ)空間浪費(fèi)的問題。改進(jìn)文件熱度計(jì)算公式，將影響到文件熱度的文件歷史訪問量引入公式計(jì)算中，使得熱度閥值

3、的計(jì)算更符合教育資源的特點(diǎn)。其次，為了解決熱度較低的文件占用較多存儲(chǔ)空間的問題，引入RS糾刪碼，利用RS糾刪碼對(duì)熱度低的文件進(jìn)行編碼存儲(chǔ)，使得編碼后的文件具有較高的可用性，同時(shí)降低了存儲(chǔ)空間的消耗。最后，針對(duì)資源抖動(dòng)和復(fù)制滯后帶來頻繁無效操作的問題，提出基于灰色預(yù)測(cè)系統(tǒng)預(yù)測(cè)模型的副本冗余策略。利用灰色系統(tǒng)的預(yù)測(cè)性，由歷史訪問量數(shù)據(jù)通過預(yù)測(cè)模型建模得到預(yù)測(cè)訪問量數(shù)據(jù)，進(jìn)而計(jì)算得到文件響應(yīng)熱度，實(shí)現(xiàn)副本數(shù)量調(diào)整的提前性。
　　針對(duì)教育