基于RDP編碼的分布式存儲(chǔ)系統(tǒng)磁盤故障修復(fù).pdf

1、建立維護(hù)可靠的、可擴(kuò)展、低成本、高性能的分布式存儲(chǔ)系統(tǒng)是云計(jì)算、大數(shù)據(jù)以及互聯(lián)網(wǎng)公司應(yīng)用后臺(tái)基礎(chǔ)的主要目標(biāo)。分布式存儲(chǔ)系統(tǒng)擁有著傳統(tǒng)集中式存儲(chǔ)所無法比擬的優(yōu)勢，然而，由于分布式存儲(chǔ)系統(tǒng)組件的不可靠，運(yùn)行過程中存在著種種異常情況，在各種異常中磁盤故障發(fā)生的概率最高，因此如何高效、透明地恢復(fù)磁盤故障，重構(gòu)磁盤數(shù)據(jù)，是分布式存儲(chǔ)系統(tǒng)所面臨的重大問題。
　　在容多錯(cuò)的分布式存儲(chǔ)系統(tǒng)中存在著頻繁的單節(jié)點(diǎn)故障，使得單節(jié)點(diǎn)故障數(shù)據(jù)修復(fù)問題成為研

2、究的熱點(diǎn)?；诩m刪碼的分布式存儲(chǔ)系統(tǒng)數(shù)據(jù)修復(fù)在現(xiàn)階段主要考慮的重要因素之一是從存活磁盤讀取的數(shù)據(jù)量最優(yōu)，因此本文的研究重點(diǎn)為以下兩方面:
　　一、研究分布式存儲(chǔ)系統(tǒng)中單節(jié)點(diǎn)故障時(shí)的磁盤數(shù)據(jù)修復(fù)問題。通過針對分布式存儲(chǔ)系統(tǒng)中存儲(chǔ)介質(zhì)的實(shí)際讀取特性，設(shè)計(jì)了一種新型的基于磁盤連續(xù)讀的故障修復(fù)方案。本文提出的基于連續(xù)讀的修復(fù)方案在保持單磁盤故障修復(fù)過程數(shù)據(jù)量讀取量最小的前提下，最大程度維持磁盤訪問的連續(xù)性，減少磁盤的跳躍性讀取，加快單磁盤

3、故障的修復(fù)效率。本文針對RDP編碼提出了相應(yīng)的基于磁盤連續(xù)讀的單節(jié)點(diǎn)故障修復(fù)方案，理論和實(shí)驗(yàn)均表明，該修復(fù)方案可以顯著提高單節(jié)點(diǎn)故障修復(fù)的速率，減少修復(fù)時(shí)間。
　　二、設(shè)計(jì)開發(fā)支持糾刪碼容錯(cuò)存儲(chǔ)技術(shù)的分布式存儲(chǔ)研究平臺(tái)DSRP，該平臺(tái)不僅可以類似普通文件系統(tǒng)對文件和目錄的進(jìn)行存取、創(chuàng)建、刪除等操作，還能支持各種糾刪碼編解碼容錯(cuò)機(jī)制、系統(tǒng)擴(kuò)容以及系統(tǒng)重復(fù)數(shù)據(jù)刪除等功能。該系統(tǒng)還可以為糾刪碼故障修復(fù)算法、重復(fù)數(shù)據(jù)刪除技術(shù)以及系統(tǒng)磁盤擴(kuò)