網(wǎng)絡(luò)輿情發(fā)現(xiàn)與分析系統(tǒng)設(shè)計與實現(xiàn).pdf

1、互聯(lián)網(wǎng)的高速發(fā)展使網(wǎng)絡(luò)信息越來越難以處理,傳統(tǒng)的以人工分類為基礎(chǔ)的處理方式已完全不能夠適應(yīng)如此規(guī)模的網(wǎng)絡(luò)信息量得處理工作,為此,很有必要依靠信息通訊技術(shù),建立網(wǎng)絡(luò)輿情監(jiān)控分析系統(tǒng),及時應(yīng)對網(wǎng)絡(luò)輿情,由被動防堵化為主動梳理、引導(dǎo)。作為一個新的研究課題,對網(wǎng)絡(luò)輿情的監(jiān)控和分析,已需要建立在高科技的現(xiàn)代信息技術(shù)當中,從而能夠及時面對網(wǎng)絡(luò)輿情突發(fā)事項并在第一時間對其進行主動控制。
　　網(wǎng)絡(luò)輿情發(fā)現(xiàn)與分析系統(tǒng)的目的是開發(fā)出用于業(yè)務(wù)單位實際工

2、作的工具性產(chǎn)品,能夠快速地針對所關(guān)注的話題檢索關(guān)注范圍內(nèi)的網(wǎng)站上的言論,做出統(tǒng)計分析和預(yù)測預(yù)警。特別是針對一些網(wǎng)站和論壇及以微博為代表的自媒體,通過對互聯(lián)網(wǎng)海量相關(guān)信息自動獲取、提取、分類、聚類、主題監(jiān)測、專題聚焦,自定義監(jiān)測等,實現(xiàn)將用戶所需信息及時匯集,大幅減少人工在各個論壇收集數(shù)據(jù)的工作量,并將網(wǎng)頁提供的信息按規(guī)范的格式進行顯示,有簡單的統(tǒng)計分析。繼而擴充采集的形式,并進行多角度的統(tǒng)計分析和圖形化顯示。進一步地,增加深度分析和網(wǎng)絡(luò)

3、輿情治理建議。
　　該系統(tǒng)包括數(shù)據(jù)采集、數(shù)據(jù)處理、輿情分析三個模塊,需要實現(xiàn)數(shù)據(jù)采集、網(wǎng)頁數(shù)據(jù)提取、數(shù)據(jù)統(tǒng)計分析、輿情數(shù)據(jù)處理和系統(tǒng)管理等功能。通過用戶給出關(guān)鍵詞的組合規(guī)則,通過搜索引擎和對關(guān)注網(wǎng)站版面使用專用爬蟲全爬過濾這兩種方式對數(shù)據(jù)進行采集。即對特定種類的以網(wǎng)絡(luò)為載體的新聞和消息在收集后通過網(wǎng)頁凈化、詞頻統(tǒng)計等手段對信息進行有效的預(yù)處理活動,并將預(yù)處理的所得結(jié)果入庫,并通過數(shù)據(jù)挖掘算法對信息進行分析,最后得到一定時期內(nèi)網(wǎng)絡(luò)所