基于校園網(wǎng)絡(luò)信息導(dǎo)航系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、進入二十一世紀(jì),伴隨著電子信息技術(shù)的飛速發(fā)展,網(wǎng)絡(luò)信息化的普及使得互聯(lián)網(wǎng)技術(shù)迎來了一個前所未有的發(fā)展機遇。網(wǎng)絡(luò)信息資源的不斷增長不僅為人們提供了更多獲取豐富的知識的便捷途徑,加快了信息的傳播和交流,還為人們的工作和日常生活帶來了無限的便利。通過互聯(lián)網(wǎng)人們幾乎可以查找到自己需求的任何信息。然而,面對如此浩瀚的網(wǎng)絡(luò)資源,如何能夠快速準(zhǔn)確的找到每個用戶需求的準(zhǔn)確信息變得尤為重要。針對以上問題,搜索服務(wù)技術(shù)的出現(xiàn)和發(fā)展為用戶提供了最佳的解決方案

2、。用戶通過訪問搜索服務(wù)提供的網(wǎng)絡(luò)接口頁面,輸入自己想要查詢的關(guān)鍵詞,即可快速準(zhǔn)確的得到相關(guān)網(wǎng)頁集合的檢索排序結(jié)果。
　　然而針對校園網(wǎng)絡(luò)這個特殊的網(wǎng)絡(luò)環(huán)境,由于網(wǎng)絡(luò)進出口帶寬的限制,網(wǎng)絡(luò)更新匹配周期的差異,通用的搜索服務(wù)無法覆蓋到校園網(wǎng)絡(luò)的每一個網(wǎng)頁。因此校園網(wǎng)用戶在使用通用的搜索服務(wù)檢索自己需求的校園網(wǎng)絡(luò)資源時,很難得到自己滿意的結(jié)果。隨著各院校辦學(xué)資源和招生規(guī)模的不斷擴大,越來越多的用戶訪問校園網(wǎng)資源。提供一種快速解決當(dāng)前校園

3、網(wǎng)絡(luò)便捷訪問的方法變得尤為迫切。本系統(tǒng)基于本校校園網(wǎng)絡(luò)數(shù)據(jù)資源進行開發(fā),實現(xiàn)校園網(wǎng)絡(luò)下不同網(wǎng)頁站點搜索頁面的接口整合。系統(tǒng)提供了一個統(tǒng)一的用戶檢索接口,減少了以往不同站點配備不同的檢索接口的繁瑣。校園網(wǎng)絡(luò)用戶只需訪問初始的搜索頁面,輸入任意需求的查詢關(guān)鍵詞,即可快速定位得到校園網(wǎng)絡(luò)相關(guān)匹配網(wǎng)頁鏈接的排序結(jié)果。
　　本文首先介紹了網(wǎng)絡(luò)信息導(dǎo)航系統(tǒng)的基本原理和主要技術(shù),根據(jù)提出的設(shè)計目標(biāo)和開發(fā)原則,將整個系統(tǒng)劃分為數(shù)據(jù)抓取、鏈接分析、

4、索引建立和檢索排序四個主要的功能模塊進行設(shè)計研究。系統(tǒng)使用以Lucene為核心的開源網(wǎng)絡(luò)數(shù)據(jù)抓取程序Nutch作為系統(tǒng)引擎架構(gòu),同時結(jié)合IK-Analyzer中文分詞組件對文本信息進行分析處理,使用Lucene內(nèi)部的索引機制為網(wǎng)頁鏈接建立索引,為用戶提供快速準(zhǔn)確的檢索服務(wù)。同時系統(tǒng)采用Hadoop框架應(yīng)用MapReduce技術(shù)實現(xiàn)數(shù)據(jù)的分布式存儲和并行計算,增強了整個系統(tǒng)數(shù)據(jù)處理的能力,并降低了系統(tǒng)對硬件配置的要求。本系統(tǒng)基本實現(xiàn)了在設(shè)