分布式數(shù)據(jù)存儲(chǔ)關(guān)鍵技術(shù)研究.pdf

1、近些年來(lái)，隨著Internet的高速發(fā)展，互聯(lián)網(wǎng)產(chǎn)生的數(shù)據(jù)以指數(shù)方式增長(zhǎng)，高速的數(shù)據(jù)增長(zhǎng)速度和海量的數(shù)據(jù)對(duì)存儲(chǔ)系統(tǒng)提出了非?？量痰囊?。例如，存儲(chǔ)能力的增長(zhǎng)速度遠(yuǎn)遠(yuǎn)趕不上數(shù)據(jù)的增長(zhǎng)速度，而存儲(chǔ)設(shè)備的性能往往與其存儲(chǔ)容量的大小成反比。就目前現(xiàn)存的分布式存儲(chǔ)系統(tǒng)來(lái)看，或多或少都存在一些缺點(diǎn)與不足，不能有效滿足大數(shù)據(jù)時(shí)代數(shù)據(jù)的存儲(chǔ)需求。一些分布式存儲(chǔ)系統(tǒng)性能較高，但造價(jià)昂貴，現(xiàn)階段不可能大規(guī)模使用（如存儲(chǔ)域網(wǎng)絡(luò) SAN），一些分布式存儲(chǔ)系統(tǒng)性

2、能優(yōu)良且價(jià)格低廉，但只適合搭建在局域網(wǎng)中（如集群文件系統(tǒng)），一些分布式存儲(chǔ)系統(tǒng)可以在廣域網(wǎng)環(huán)境中搭建，但沒(méi)有認(rèn)真考慮系統(tǒng)中數(shù)據(jù)的存儲(chǔ)位置、副本個(gè)數(shù)、資源查找算法等，造成系統(tǒng)的性能低下（如分布式文件系統(tǒng)Coda）。
　　就目前來(lái)看，隨著社交網(wǎng)絡(luò)、傳感器等各種新技術(shù)的涌現(xiàn)和大規(guī)模應(yīng)用，各種類(lèi)型的數(shù)據(jù)迅速增長(zhǎng)。如何對(duì)這些增長(zhǎng)的數(shù)據(jù)進(jìn)行存儲(chǔ)、如何對(duì)數(shù)據(jù)資源進(jìn)行迅速定位、如何在可接受的時(shí)間范圍內(nèi)對(duì)數(shù)據(jù)進(jìn)行分析，發(fā)掘數(shù)據(jù)中含有的重大價(jià)值，是數(shù)

3、據(jù)存儲(chǔ)系統(tǒng)必須要考慮解決的問(wèn)題。在這種情況下，設(shè)計(jì)合理的分布式存儲(chǔ)系統(tǒng)來(lái)解決海量數(shù)據(jù)對(duì)當(dāng)前存儲(chǔ)方式所帶來(lái)的挑戰(zhàn)成為大數(shù)據(jù)時(shí)代存儲(chǔ)系統(tǒng)的關(guān)鍵。
　　本論文的主要研究工作包括以下三個(gè)方面：1、查閱相關(guān)資料，對(duì)當(dāng)前環(huán)境下數(shù)據(jù)的存儲(chǔ)方式做了解比較，掌握其不足之處。2針對(duì)目前分布式存儲(chǔ)系統(tǒng)的不足，以發(fā)展相對(duì)比較成熟的P2P技術(shù)作為存儲(chǔ)結(jié)構(gòu)體系，對(duì)數(shù)據(jù)冗余容錯(cuò)技術(shù)、副本管理機(jī)制、資源的搜索算法做了詳細(xì)的探索與研究。3、搭建分布式存儲(chǔ)系統(tǒng)，對(duì)所