【設(shè)計(jì)正文】模板(雙面打印)

1、西華大學(xué)畢業(yè)設(shè)計(jì)說(shuō)明書(shū)摘要摘要搜索引擎（SearchEngine）是一個(gè)對(duì)互聯(lián)網(wǎng)上的信息資源進(jìn)行搜集整理的應(yīng)用軟件系統(tǒng)。它主要包括信息搜集、索引建立和信息檢索三個(gè)部分。搜索引擎有很多類(lèi)型，常見(jiàn)的有FTP搜索引擎和WEB搜索引擎。一般WEB搜索引擎較少處理FTP服務(wù)器上的數(shù)據(jù)。就信息規(guī)模而言，F(xiàn)TP服務(wù)器的信息量比WEB服務(wù)器小很多。因此FTP搜索引擎硬件投入和維護(hù)的費(fèi)用也遠(yuǎn)遠(yuǎn)低于大型通用搜索引擎。本文針對(duì)在FTP服務(wù)器的搜索速度和效率問(wèn)

2、題，對(duì)現(xiàn)有FTP搜索引擎技術(shù)進(jìn)行了分析和研究，重點(diǎn)詳細(xì)介紹了爬蟲(chóng)模塊和索引模塊的設(shè)計(jì)與實(shí)現(xiàn)。文章首先分析了FTP搜索引擎研究的背景和意義。然后在第3章節(jié)和第4章節(jié)中詳細(xì)描述了關(guān)鍵的爬蟲(chóng)技術(shù)和索引技術(shù)，包括：如何進(jìn)行網(wǎng)段掃描，獲取數(shù)據(jù)以及建立索引數(shù)據(jù)庫(kù)等。最后本文還分析了在爬蟲(chóng)和索引實(shí)現(xiàn)時(shí)遇到的困難并提出了相應(yīng)的解決方案?！娟P(guān)鍵詞】FTP搜索引擎網(wǎng)絡(luò)爬蟲(chóng)索引II西華大學(xué)畢業(yè)設(shè)計(jì)說(shuō)明書(shū)1FTP搜索引擎爬蟲(chóng)模塊介紹..............

3、...................................................................21.1設(shè)計(jì)思路.....................................................................................................21.2設(shè)計(jì)步驟....................................

4、.................................................................21.2.1掃描站點(diǎn)...........................................................................................21.2.2獲取數(shù)據(jù)............................................

5、...............................................21.2.3數(shù)據(jù)分類(lèi)...........................................................................................21.2.4生成源文件.............................................................

6、..........................31.2.5生成站點(diǎn)列表...................................................................................31.2.6建立索引文件...................................................................................32FT

7、P搜索引擎概要設(shè)計(jì).........................................................................................42.1工作原理.....................................................................................................42.2工作流程圖....

8、.............................................................................................53FTP搜索引爬蟲(chóng)模塊擎詳細(xì)設(shè)計(jì).........................................................................63.1設(shè)計(jì)目的.............................

9、........................................................................63.2功能模塊設(shè)計(jì).............................................................................................63.2.1網(wǎng)段掃描...................................

10、........................................................63.2.2獲取數(shù)據(jù)...........................................................................................83.2.3關(guān)于編碼問(wèn)題的解決................................................

11、.....................163.2.4服務(wù)器兼容.....................................................................................173.2.5生成數(shù)據(jù)文件.................................................................................213.2.6生

12、成站點(diǎn)列表.................................................................................244FTP搜索引擎索引模塊詳細(xì)設(shè)計(jì).......................................................................264.1.1格式化數(shù)據(jù).................................

13、....................................................264.1.2匯總屬性文件.................................................................................284.1.3雙字母建立索引............................................................

14、.................294.1.4索引數(shù)據(jù)庫(kù).....................................................................................314.1.5字符編碼.........................................................................................325開(kāi)發(fā)環(huán)