多數(shù)據(jù)中心非結(jié)構(gòu)化數(shù)據(jù)復(fù)制方法研究.pdf

1、Web2.0時(shí)代改變了互聯(lián)網(wǎng)，互聯(lián)網(wǎng)用戶(hù)的交互行為產(chǎn)生了越來(lái)越多的非結(jié)構(gòu)化數(shù)據(jù)，存儲(chǔ)于分布在世界各地的數(shù)據(jù)中心中。每個(gè)數(shù)據(jù)中心擁有數(shù)量龐大的服務(wù)器，基于備份和讀取性能的原因，在這些不同地理位置的數(shù)據(jù)中心之間進(jìn)行數(shù)據(jù)復(fù)制十分必要。
　　論文研究了非結(jié)構(gòu)化列族數(shù)據(jù)庫(kù)(Hbase)復(fù)制時(shí)的數(shù)據(jù)篩選和存儲(chǔ)方式；討論了針對(duì)Hbase數(shù)據(jù)中心的數(shù)據(jù)復(fù)制方式及其域間復(fù)制網(wǎng)絡(luò)，研究了區(qū)域中擁有多核心和共享核心對(duì)域間復(fù)制網(wǎng)絡(luò)可擴(kuò)展性的影響，在域間網(wǎng)

2、絡(luò)路由熵的可擴(kuò)展性理論基礎(chǔ)上進(jìn)行了比較；最后根據(jù)最早截止時(shí)間優(yōu)先調(diào)度算法(earliest deadline first：EDF)的理論，研究了基于優(yōu)先級(jí)增長(zhǎng)概率的優(yōu)先級(jí)復(fù)制任務(wù)隊(duì)列。
　　論文的主要工作如下：
　　基于HBase按列族存儲(chǔ)的特點(diǎn)，在復(fù)制時(shí)直接對(duì)列族進(jìn)行篩選和存儲(chǔ)。并且討論了一種二維哈希尋址方案，根據(jù)表和列族進(jìn)行相對(duì)集中的存儲(chǔ)和尋址，加大了讀取的效率，減少了并發(fā)連接；在此基礎(chǔ)上改進(jìn)了在目標(biāo)數(shù)據(jù)中心中隨機(jī)選取一