異構(gòu)大數(shù)據(jù)存儲方法研究.pdf

1、隨著互聯(lián)網(wǎng)Web2.0技術(shù)的發(fā)展，數(shù)據(jù)量呈爆炸式增長，數(shù)據(jù)存儲亦面臨巨大挑戰(zhàn)。在當(dāng)前的大數(shù)據(jù)環(huán)境下，傳統(tǒng)關(guān)系數(shù)據(jù)庫由于自身特性的限制，難以很好地滿足數(shù)據(jù)存儲提出的新的需求。因此，有必要對異構(gòu)大數(shù)據(jù)環(huán)境下的數(shù)據(jù)存儲方法進行研究，尋找滿足特定需求的通用的數(shù)據(jù)存儲方案，為大數(shù)據(jù)存儲問題的解決提供參考和借鑒，具有重要的理論意義和實踐價值。
　　大數(shù)據(jù)的存儲方案是由要實現(xiàn)的功能所決定，對于不同的需求，采用不同的存儲模式。本文選取Web2.0

2、應(yīng)用的典型代表——微博系統(tǒng)進行研究，符合大數(shù)據(jù)環(huán)境下海量數(shù)據(jù)、實時性強、大量讀寫操作、高并發(fā)的特征，具有較為通用的意義，主要的研究內(nèi)容包括以下幾個方面:
　　首先，針對大數(shù)據(jù)的產(chǎn)生及所帶來的挑戰(zhàn)，從技術(shù)的角度論述了非關(guān)系數(shù)據(jù)庫的發(fā)展歷程。從總體上對關(guān)系數(shù)據(jù)庫和非關(guān)系數(shù)據(jù)庫的特點進行了對比，詳細分析了關(guān)系數(shù)據(jù)庫的優(yōu)缺點及在大數(shù)據(jù)環(huán)境下遇到的瓶頸，深入研究了非關(guān)系數(shù)據(jù)庫的架構(gòu)、理論、特征及存儲模型，闡述了其相比于關(guān)系數(shù)據(jù)庫所存在的優(yōu)勢

3、。
　　然后，從功能上和性能上對微博系統(tǒng)具體的存儲要求進行了深入分析，采用非關(guān)系數(shù)據(jù)庫中三種具有不同存儲模型的數(shù)據(jù)庫，包括Redis、HBase和MongoDB，結(jié)合各自的特點來研究微博系統(tǒng)相關(guān)存儲功能的實現(xiàn)，提出了適合微博系統(tǒng)的數(shù)據(jù)存儲方案，設(shè)計了數(shù)據(jù)存儲結(jié)構(gòu)，可以滿足對實時性、擴展性、可靠性和并發(fā)性的要求。同時使用關(guān)系數(shù)據(jù)庫進行設(shè)計，通過對比，從理論上證明了非關(guān)系數(shù)據(jù)庫研究的合理性。
　　最后，針對微博系統(tǒng)設(shè)計的存儲結(jié)構(gòu)