基于網(wǎng)絡(luò)爬蟲的游戲輿情監(jiān)測(cè)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著電腦、智能手機(jī)以及平板電腦的普及，互聯(lián)網(wǎng)已成為大眾創(chuàng)業(yè)、萬眾創(chuàng)新的新工具。全球游戲產(chǎn)業(yè)迅速興起，游戲制作的門檻隨著技術(shù)的進(jìn)步逐漸降低，從而使得銷售額和玩家呈現(xiàn)逐年增加的態(tài)勢(shì)。游戲?qū)儆趧?chuàng)意產(chǎn)業(yè)，其產(chǎn)業(yè)鏈為增值鏈，即研發(fā)制作、發(fā)布運(yùn)營(yíng)、推廣銷售，一步比一步所要做的工作多，支付的資金多。隨著游戲市場(chǎng)的飛速增長(zhǎng)，游戲在研發(fā)、測(cè)試到運(yùn)營(yíng)、維護(hù)的過程中，游戲產(chǎn)業(yè)的人員迫切需要了解玩家對(duì)游戲的感受和體驗(yàn)，以制作出符合玩家口味的高質(zhì)量游戲。

2、　　本文分析了現(xiàn)有游戲行業(yè)收集用戶反饋的現(xiàn)狀，指出現(xiàn)有游戲行業(yè)的人工輿情監(jiān)測(cè)存在的問題。在總結(jié)國(guó)內(nèi)外相關(guān)研究成果的基礎(chǔ)上，借鑒一些技術(shù)的成熟實(shí)踐經(jīng)驗(yàn)，并以騰訊游戲平臺(tái)為依托，通過對(duì)整個(gè)游戲輿情監(jiān)測(cè)流程的解析，設(shè)計(jì)并實(shí)現(xiàn)了基于網(wǎng)絡(luò)爬蟲的游戲輿情監(jiān)測(cè)系統(tǒng)。本文主要工作如下：
　　1.針對(duì)網(wǎng)絡(luò)上游戲品種多，玩家對(duì)游戲的評(píng)價(jià)過于分散，人工收集游戲輿情耗時(shí)耗力的問題，設(shè)計(jì)和實(shí)現(xiàn)了網(wǎng)絡(luò)爬蟲功能。用戶可以定制規(guī)則來爬取論壇或其他來源的數(shù)據(jù)，網(wǎng)絡(luò)

3、爬蟲支持特征串標(biāo)記、路徑解析等方式對(duì)需要的網(wǎng)頁(yè)內(nèi)容進(jìn)行定制化的提取，然后將數(shù)據(jù)存儲(chǔ)到分布式數(shù)據(jù)庫(kù)中供后續(xù)分析使用。網(wǎng)絡(luò)爬蟲功能有效的解決了傳統(tǒng)通過人工查看輿情費(fèi)時(shí)費(fèi)力且容易遺漏的問題。
　　2.針對(duì)人工查看玩家反饋，通過主觀判斷難以評(píng)判玩家對(duì)游戲的評(píng)價(jià)問題，設(shè)計(jì)和實(shí)現(xiàn)了對(duì)輿情信息進(jìn)行自動(dòng)化分析的功能。在爬取到論壇等來源的數(shù)據(jù)后，使用中文分詞工具對(duì)數(shù)據(jù)分詞，根據(jù)項(xiàng)目詞庫(kù)和用戶自定義詞庫(kù)，分析統(tǒng)計(jì)每天數(shù)據(jù)源中熱詞的出現(xiàn)頻率，匯總得到熱

4、詞趨勢(shì)、游戲口碑等數(shù)據(jù)。在此基礎(chǔ)上，通過郵件、網(wǎng)頁(yè)圖表展示等方式，將游戲輿情信息以可視化的方式展現(xiàn)給用戶。
　　3.綜合上述功能，設(shè)計(jì)并實(shí)現(xiàn)了基于網(wǎng)絡(luò)爬蟲的游戲輿情監(jiān)測(cè)系統(tǒng)，該系統(tǒng)包含前端 Web展示和后端業(yè)務(wù)實(shí)現(xiàn)兩個(gè)部分。前端采用PHP和Apache相結(jié)合的方案，后端包括了后臺(tái)控制系統(tǒng)、網(wǎng)絡(luò)爬蟲器、熱詞分析器、定時(shí)任務(wù)工具、自動(dòng)化郵件工具、索引工具以及其他模塊。使用到了爬蟲、網(wǎng)頁(yè)解析庫(kù)、分詞工具、全文檢索引擎等工具。該系統(tǒng)解決了