搜索引擎及搜索引擎優(yōu)化(seo)實(shí)驗(yàn)

1、1實(shí)驗(yàn)三搜索引擎及SEO實(shí)驗(yàn)一、實(shí)驗(yàn)?zāi)康囊?、?shí)驗(yàn)?zāi)康难芯坎W(xué)習(xí)幾種常見(jiàn)的搜索引擎算法，包括網(wǎng)絡(luò)蜘蛛爬行策略、中文分詞算法、網(wǎng)頁(yè)正文提取算法、網(wǎng)頁(yè)去重算法、PageRank和MapReduce算法，了解它們的基本實(shí)現(xiàn)原理；運(yùn)用所學(xué)SEO技術(shù)對(duì)網(wǎng)頁(yè)進(jìn)行優(yōu)化。二、實(shí)驗(yàn)內(nèi)容二、實(shí)驗(yàn)內(nèi)容1.研究常用的網(wǎng)絡(luò)蜘蛛爬行策略，如深度優(yōu)先策略、廣度優(yōu)先策略、網(wǎng)頁(yè)選擇策略、重訪策略和并行策略等，了解其實(shí)現(xiàn)原理；2.研究至少兩種中文分詞算法，了解其實(shí)現(xiàn)原理；3

2、.研究至少兩種網(wǎng)頁(yè)正文提取算法，了解其實(shí)現(xiàn)原理；4.研究至少兩種網(wǎng)頁(yè)去重算法，了解其實(shí)現(xiàn)原理；5.研究Google的PageRank和MapReduce算法，了解它們的實(shí)現(xiàn)原理；6.使用所學(xué)的SEO技術(shù)，對(duì)實(shí)驗(yàn)二所設(shè)計(jì)的網(wǎng)站靜態(tài)首頁(yè)實(shí)施SEO，在實(shí)施過(guò)程中需采用如下技術(shù)：(1)網(wǎng)頁(yè)標(biāo)題(title)的優(yōu)化；(2)選取合適的關(guān)鍵詞并對(duì)關(guān)鍵詞進(jìn)行優(yōu)化；(3)元標(biāo)簽的優(yōu)化；(4)網(wǎng)站結(jié)構(gòu)和URL的優(yōu)化；(5)創(chuàng)建robots.txt文件，禁止

3、蜘蛛抓取網(wǎng)站后臺(tái)頁(yè)面；(6)網(wǎng)頁(yè)內(nèi)部鏈接的優(yōu)化；(7)Heading標(biāo)簽的優(yōu)化；(8)圖片優(yōu)化；(9)網(wǎng)頁(yè)減肥技術(shù)。7.使用C、C#和Java等任意一種編程語(yǔ)言，設(shè)計(jì)并實(shí)現(xiàn)一個(gè)簡(jiǎn)單的網(wǎng)絡(luò)蜘蛛爬行程序，要求在輸入關(guān)鍵詞、設(shè)置爬行深度和初始網(wǎng)頁(yè)URL之后能夠?qū)崿F(xiàn)網(wǎng)頁(yè)搜索，輸出包含關(guān)鍵詞的網(wǎng)頁(yè)的URL和網(wǎng)頁(yè)標(biāo)題?！咀ⅲ簩?shí)驗(yàn)注：實(shí)驗(yàn)7為補(bǔ)充實(shí)驗(yàn)，不要求每個(gè)同學(xué)都完成，為補(bǔ)充實(shí)驗(yàn)，不要求每個(gè)同學(xué)都完成，感興趣者可自行實(shí)現(xiàn)該程序，不計(jì)入實(shí)驗(yàn)報(bào)告評(píng)分

4、。感興趣者可自行實(shí)現(xiàn)該程序，不計(jì)入實(shí)驗(yàn)報(bào)告評(píng)分。】三、實(shí)驗(yàn)要求三、實(shí)驗(yàn)要求1.研究幾種常用的網(wǎng)絡(luò)蜘蛛爬行策略，填寫相應(yīng)的表格，表格必須填寫完整；2.研究?jī)煞N中文分詞算法，填寫相應(yīng)的表格，表格必須填寫完整；3.研究?jī)煞N網(wǎng)頁(yè)正文提取算法，填寫相應(yīng)的表格，表格必須填寫完整；4.研究?jī)煞N網(wǎng)頁(yè)去重算法，填寫相應(yīng)的表格，表格必須填寫完整；3HTML文件中的其他超鏈。當(dāng)不再有其他超鏈可選擇時(shí)，說(shuō)明搜索已經(jīng)結(jié)束。廣度優(yōu)先策略寬度優(yōu)先搜索算法（又稱廣度優(yōu)

5、先搜索）是最簡(jiǎn)便的圖的搜索算法之一，這一算法也是很多重要的圖的算法的原型。Dijkstra單源最短路徑算法和Prim最小生成樹(shù)算法都采用了和寬度優(yōu)先搜索類似的思想。其別名又叫BFS，屬于一種盲目搜尋法，目的是系統(tǒng)地展開(kāi)并檢查圖中的所有節(jié)點(diǎn)，以找尋結(jié)果。換句話說(shuō)，它并不考慮結(jié)果的可能位址，徹底地搜索整張圖，直到找到結(jié)果為止。百度百科廣度優(yōu)先搜索：:baike.view1242613.htm網(wǎng)頁(yè)選擇策略對(duì)搜索引擎而言，要搜索互聯(lián)網(wǎng)上所有的網(wǎng)

6、頁(yè)幾乎不可能，即使全球知名的搜索引擎google也只能搜索整個(gè)Inter網(wǎng)頁(yè)的30％左右。其中的原因主要有兩方面，一是抓取技術(shù)的瓶頸。網(wǎng)絡(luò)爬蟲(chóng)無(wú)法遍歷所有的網(wǎng)頁(yè)；二是存儲(chǔ)技術(shù)和處理技術(shù)的問(wèn)題。因此，網(wǎng)絡(luò)爬蟲(chóng)在抓取網(wǎng)頁(yè)時(shí)。盡量先采集重要的網(wǎng)頁(yè)，即采用網(wǎng)頁(yè)優(yōu)先抓取策略。網(wǎng)頁(yè)選擇策略是給予重要程度、等級(jí)較高的Web頁(yè)以較高的抓取優(yōu)先級(jí)，即Web頁(yè)越重要，則越應(yīng)優(yōu)先抓取。其實(shí)質(zhì)上是一種使網(wǎng)絡(luò)爬蟲(chóng)在一定條件下較快地鎖定互聯(lián)網(wǎng)中被用戶普遍關(guān)注的重要