基于Hadoop的安全云存儲系統(tǒng)研究與實現(xiàn).pdf

1、隨著信息時代的數(shù)據(jù)量以PB級飛速增長，傳統(tǒng)存儲模式在大數(shù)據(jù)存儲方面的局限性逐漸暴露出來，單一存儲很容易使用戶數(shù)據(jù)丟失，造成巨大損失，越來越多的企業(yè)和研究機構(gòu)認(rèn)識到必須有一種新的存儲機制去改變存儲行業(yè)現(xiàn)狀。云存儲技術(shù)的引入為存儲模式的改變帶來了契機，國內(nèi)外機構(gòu)和企業(yè)在云存儲熱潮下紛紛推出自己的云存儲產(chǎn)品和解決方案，但由于對產(chǎn)品的安全性不夠重視，各類安全事故頻繁發(fā)生，給用戶造成了巨大損失。在此背景下，云存儲系統(tǒng)的安全性問題逐漸成為業(yè)界關(guān)注的

2、熱點。
　　本文在假設(shè)云計算提供商可信的前提下，從應(yīng)用安全的角度出發(fā)，通過大量關(guān)鍵技術(shù)的研究，構(gòu)建了一種基于Hadoop的安全云存儲系統(tǒng)。本文首先調(diào)研了國內(nèi)外機構(gòu)對云存儲系統(tǒng)和云存儲安全性的研究現(xiàn)狀，在此基礎(chǔ)上對構(gòu)建云存儲系統(tǒng)涉及到的關(guān)鍵技術(shù)進行了深入研究，主要包括 HDFS數(shù)據(jù)讀寫原理、虛擬磁盤原理、文件系統(tǒng)過濾驅(qū)動原理、HTTPS安全傳輸原理、多線程傳輸原理。隨后結(jié)合實際情況，對安全云存儲系統(tǒng)從功能和性能兩個方面進行了需求分析

3、，并提出了系統(tǒng)的總體架構(gòu)，然后根據(jù)總體架構(gòu)從安全客戶端、安全可靠傳輸和服務(wù)器端三個大的模塊出發(fā)進行了詳細設(shè)計，主要包括虛擬磁盤和文件系統(tǒng)過濾驅(qū)動的兩級加密機制設(shè)計、多線程斷點續(xù)傳設(shè)計、服務(wù)端的存儲架構(gòu)及數(shù)據(jù)處理模塊設(shè)計。接下來從代碼實現(xiàn)的角度對系統(tǒng)各個模塊的實現(xiàn)過程進行了詳細闡述，并對某些重要功能進行了效果展示。最后對系統(tǒng)從功能上和性能上進行了測試，經(jīng)測試構(gòu)建的系統(tǒng)達到了預(yù)定的功能需求，滿足響應(yīng)性、可靠性、可用性三個方面的性能指標(biāo)。