基于元數(shù)據(jù)關(guān)聯(lián)特征的分布式查詢方法研究.pdf

1、信息技術(shù)的不斷發(fā)展對信息存儲高容量,高性能提出更高的要求,云存儲應運而生。大規(guī)模存儲系統(tǒng)的應用越來越廣泛,存儲容量從以前的TB(Terabyte)級上升到PB(Petabyte)級甚至EB(Exabyte)級。用戶在使用海量存儲空間的同時,也發(fā)現(xiàn)數(shù)據(jù)的查找和管理變得越來越困難?，F(xiàn)有的元數(shù)據(jù)管理方法存在可擴展性弱、查詢效率低、實時性差等缺點。
　　針對上述缺點,提出了一種基于關(guān)聯(lián)特征的元數(shù)據(jù)查詢方法,可以充分利用多維元數(shù)據(jù)的關(guān)聯(lián)特征

2、來提高查詢效率。系統(tǒng)在局部靈敏哈希(LSH)聚集數(shù)據(jù)的基礎(chǔ)上建立分布式索引。全局索引劃分采用LSH哈希表桶內(nèi)劃分的方式來提升系統(tǒng)的擴展性,可以避免大量的數(shù)據(jù)遷移。索引的維護采用分層架構(gòu),每層獨立配置,同時具有較好的可擴展性,方便系統(tǒng)管理。為了快速更新分布式索引,系統(tǒng)的索引采用文件存儲,并基于版本批量更新。在這種架構(gòu)下,查詢請求采用基于代理的處理模式,每個請求都會分配一臺查詢服務(wù)器作為代理,代理節(jié)點負責轉(zhuǎn)發(fā)查詢請求、收集查詢結(jié)果并返回給客