面向大數(shù)據(jù)的關(guān)鍵字檢索算法研究及優(yōu)化.pdf

1、針對(duì)傳統(tǒng)檢索模型在檢索上存在的數(shù)據(jù)冗余、模糊匹配、檢索結(jié)果差等缺點(diǎn)，結(jié)合當(dāng)前研究熱點(diǎn)，論述異構(gòu)數(shù)據(jù)集成、冗余數(shù)據(jù)排除、高效數(shù)據(jù)分類、關(guān)鍵字檢索等模型與方法，旨在大數(shù)據(jù)環(huán)境下，充分利用傳統(tǒng)技術(shù)與虛擬化技術(shù)、Map-Reduce并行框架模型、改進(jìn)向量空間檢索模型等技術(shù)相結(jié)合優(yōu)化存儲(chǔ)模型、改進(jìn)分類算法以及優(yōu)化檢索算法，進(jìn)而提高算法運(yùn)算效率，為用戶提供一套集數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分類、數(shù)據(jù)檢索于一體的大數(shù)據(jù)檢索基礎(chǔ)平臺(tái)。
　　以關(guān)鍵字檢索算法作為

2、研究對(duì)象，主要研究?jī)?nèi)容為：
　　首先，為了更好地對(duì)數(shù)據(jù)檢索提供良好的數(shù)據(jù)存儲(chǔ)基礎(chǔ)，研究數(shù)據(jù)模型的設(shè)計(jì)與優(yōu)化，并在云計(jì)算環(huán)境下研討設(shè)計(jì)數(shù)據(jù)存儲(chǔ)模型，文件塊的數(shù)據(jù)更新算法設(shè)計(jì)，以及云存儲(chǔ)的故障恢復(fù)機(jī)制等。
　　第二，為了達(dá)到準(zhǔn)確地對(duì)不同數(shù)據(jù)的檢索要求，在原有分類算法的基礎(chǔ)上提出了并行分類混合算法（PCHA算法），該算法利用鄰近分類算法適合處理屬性多、數(shù)據(jù)大的分類問題的優(yōu)勢(shì)，引入 Map-Reduce并行框架與其融合設(shè)計(jì)，優(yōu)化并提

3、升原有分類算法的建模預(yù)測(cè)能力和分類識(shí)別率。
　　第三，研討傳統(tǒng)檢索算法并提出無序關(guān)鍵字檢索算法（DKRA算法），該算法利用向量檢索模型計(jì)算方便、復(fù)雜度低等優(yōu)點(diǎn)，引入 K-D矩陣構(gòu)造及相似度等計(jì)算方法設(shè)計(jì)檢索算法，并與計(jì)算關(guān)鍵字序列權(quán)重得到相關(guān)數(shù)據(jù)相似度的計(jì)算方法做比較，從而體現(xiàn)DKRA算法在計(jì)算效率上的優(yōu)勢(shì)。
　　最后，在 DKRA算法的基礎(chǔ)上提出了有序關(guān)鍵字檢索算法（OKRA算法），該算法利用檢索關(guān)鍵字的有序性，給出了關(guān)鍵