海量離散點(diǎn)數(shù)據(jù)快速檢索系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、本文針對(duì)海量離散數(shù)據(jù)的特點(diǎn)，借鑒分布式數(shù)據(jù)庫、并行運(yùn)算、網(wǎng)格計(jì)算及多線程的思想，提出了一套海量離散數(shù)據(jù)快速檢索方法。 結(jié)合全國自然重砂系統(tǒng)研制，針對(duì)分散存放在全國各省的自然重砂數(shù)據(jù)庫，數(shù)據(jù)海量、離散、分布無規(guī)律、受計(jì)算機(jī)配置、網(wǎng)絡(luò)速度等硬件因素影響的情況下，應(yīng)用分布式數(shù)據(jù)庫及并行運(yùn)算理念，采用區(qū)域分片及多線程隊(duì)列方法對(duì)某個(gè)多邊形區(qū)域內(nèi)的離散數(shù)據(jù)進(jìn)行檢索與處理。主要取得了以下成果和結(jié)論： (1)合理的數(shù)據(jù)庫設(shè)計(jì)可以在服務(wù)器

2、上縮小查詢開銷。數(shù)據(jù)庫設(shè)計(jì)的優(yōu)化主要表現(xiàn)在物理設(shè)計(jì)上以優(yōu)化I/O操作、優(yōu)化索引設(shè)計(jì)可以大大提高查詢速度。 (2)利用MSSQLServer2000查詢優(yōu)化器等工具優(yōu)化SQL語句的執(zhí)行性能。文中還提到優(yōu)化SQL語句執(zhí)行的其它技巧。 (3)采用分片技術(shù)可以縮小用戶等待時(shí)間，提高響應(yīng)速度。分片包括兩個(gè)部分：數(shù)據(jù)庫分片和查詢分片。數(shù)據(jù)庫分片可以在物理上優(yōu)化查詢開銷。查詢分片可以利用并行運(yùn)算思想和網(wǎng)格運(yùn)算思想執(zhí)行分散查詢以縮短系統(tǒng)

3、響應(yīng)時(shí)間。 (4)采用多線程技術(shù)可以達(dá)到請(qǐng)求方與響應(yīng)方的CPU負(fù)載平衡。請(qǐng)求方與響應(yīng)方為一對(duì)多的關(guān)系。多線程可以同時(shí)請(qǐng)求多臺(tái)服務(wù)器查詢，并采用線程同步機(jī)制使請(qǐng)求方與響應(yīng)方消息一致。 (5)網(wǎng)絡(luò)帶寬等硬件因素也是影響查詢速度的一個(gè)方面。根據(jù)現(xiàn)有的網(wǎng)絡(luò)狀態(tài)，運(yùn)用一些工具軟件及花銷較小的代價(jià)改造現(xiàn)有網(wǎng)絡(luò)環(huán)境，以提高數(shù)據(jù)傳輸性能。 根據(jù)以上幾個(gè)方面，結(jié)合實(shí)際情況，開發(fā)了全國自然重砂數(shù)據(jù)庫系統(tǒng)，在數(shù)據(jù)查詢和數(shù)據(jù)處理方面取得