基于SDN的重復數(shù)據(jù)刪除方法研究.pdf

1、隨著大數(shù)據(jù)和移動互聯(lián)網(wǎng)技術的發(fā)展，數(shù)據(jù)量急劇增加，需要備份保護的數(shù)據(jù)也越來越多，為了減少存儲空間的開銷和降低網(wǎng)絡傳輸?shù)耐ㄐ帕?，?shù)據(jù)去重技術已經(jīng)成為了存儲系統(tǒng)中的一個標準特性。雖然重復數(shù)據(jù)刪除技術在存儲系統(tǒng)中已經(jīng)較為成熟，但是在實際應用，特別是網(wǎng)絡傳輸應用中仍然存在諸多問題和挑戰(zhàn)。例如在云備份系統(tǒng)中，由于客戶端緩存有限以及廣域網(wǎng)帶寬的限制，備份過程中重復數(shù)據(jù)的判斷需要在服務器端進行，這導致很大的傳輸延遲，所以會阻塞后續(xù)數(shù)據(jù)的上傳，增加了備

2、份窗口，在全局去重時問題更加嚴重。為提高云備份中源端去重的性能，高效的重復數(shù)據(jù)刪除方法對減少備份時間具有重要的意義。
　　隨著可編程網(wǎng)絡技術如SDN(Software Defined Network)的成熟，在網(wǎng)絡中部署復雜的應用變得簡單，本文提出在SDN Controller中檢測網(wǎng)絡中的冗余數(shù)據(jù)，加快冗余數(shù)據(jù)的判斷過程，減小備份時間，在SDN控制器中增設指紋緩存，而無需在每個客戶端都緩存指紋。一定程度上，在每個客戶端開辟指紋緩

3、存，引入了多個用戶之間緩存指紋的冗余。本文提出的方法主要是通過在SDN控制器上使用Bloom filter和緩存的索引結構來進行網(wǎng)內的重復數(shù)據(jù)檢測，同時通過下發(fā)流表項實現(xiàn)對SDN控制器中指紋緩存的查詢和更新，從而快速判斷數(shù)據(jù)是否重復，這種方法的創(chuàng)新點在于將冗余檢測的邏輯引入到SDN網(wǎng)絡中，和傳統(tǒng)的重復數(shù)據(jù)刪除相比，其優(yōu)勢在于不僅可以減小備份客戶端的備份窗口，而且避免了在中間網(wǎng)絡設備中進行編解碼的復雜操作。
　　實驗結果表明，基于S