云存儲系統(tǒng)數(shù)據(jù)持久存儲機制的研究.pdf

1、云存儲提供的虛擬化服務(wù)，極大地簡化了應(yīng)用流程，并降低了建設(shè)成本，給人們帶來了巨大便利。但在其高速推進過程中頻發(fā)的安全事故，讓人們對云存儲的可靠性產(chǎn)生了擔(dān)憂。例如硬件故障、惡意攻擊、人員操作失誤、以及斷電、火災(zāi)等自然災(zāi)害，導(dǎo)致單個或多個存儲節(jié)點失效，從而使得整個存儲數(shù)據(jù)丟失的可能性大大提高。因此，云存儲系統(tǒng)應(yīng)該具有完善的數(shù)據(jù)存儲保障機制，以保證系統(tǒng)的高可靠性和數(shù)據(jù)的高可用性。
　　 云存儲系統(tǒng)數(shù)據(jù)持久存儲機制有效地保證了系統(tǒng)的可靠

2、性和數(shù)據(jù)的可用性。數(shù)據(jù)持久存儲的相關(guān)技術(shù)包括數(shù)據(jù)的分片，數(shù)據(jù)的分發(fā)和完整性檢查，以及冗余數(shù)據(jù)的維護。存儲數(shù)據(jù)的可用性是衡量系統(tǒng)性能的重要指標(biāo)，數(shù)據(jù)的可用性又主要體現(xiàn)在系統(tǒng)節(jié)點間的組織方式，以及系統(tǒng)對于數(shù)據(jù)冗余容錯的處理方法。數(shù)據(jù)持久存儲機制實現(xiàn)了基于糾刪碼技術(shù)的數(shù)據(jù)分片與合并，以及對冗余數(shù)據(jù)基于目錄的分發(fā)和高效的數(shù)據(jù)完整性檢查，對于丟失數(shù)據(jù)分片能夠通過現(xiàn)有文件對其進行編碼恢復(fù)。
　　 設(shè)置自適應(yīng)緩沖區(qū)，分段讀入文件數(shù)據(jù)進行編碼的

3、方法，在提高編碼效率的同時，有效對于原文件內(nèi)容進行了分散，保證了私密性。通過對糾刪碼算法核心部分的優(yōu)化，明顯提高了對文件進行分片與合并時的平均編碼速率。
　　 通過理論研究分析表明，基于糾刪碼的數(shù)據(jù)冗余方案在保證數(shù)據(jù)可用性上有明顯的優(yōu)勢，與復(fù)制冗余方案相比，能夠在獲得相同的數(shù)據(jù)可用性時降低存儲空間和網(wǎng)絡(luò)帶寬的開銷。系統(tǒng)功能與性能測試結(jié)果表明，引入糾刪碼技術(shù)后，在保證相同數(shù)據(jù)可用性的情況下，相對于傳統(tǒng)的基于復(fù)制的數(shù)據(jù)冗余方案，節(jié)約