基于垂直搜索引擎的輿情預警分析平臺.pdf

1、隨著網(wǎng)絡信息化以及手機移動端的飛速發(fā)展，互聯(lián)網(wǎng)已逐漸代替?zhèn)鹘y(tǒng)媒體成為人們獲取信息和共享信息的主要方式，以網(wǎng)絡新聞為代表的網(wǎng)絡輿情成為社會輿情的重要的組成部分?；ヂ?lián)網(wǎng)的開放性、匿名性使得人們能夠自由的發(fā)表言論，但其中一些片面的觀點、不負責任的言論也會通過互聯(lián)網(wǎng)快速傳播，很容易引發(fā)輿情事件造成不良影響。目前，很多中小型的企業(yè)公司和地方政府單位的輿情監(jiān)控工作還處在起步階段，主要依靠人工進行輿情監(jiān)控。因此迫切需求一種可靠高效的網(wǎng)絡輿情監(jiān)控工具，

2、輔助完成輿情監(jiān)控工作。目前存在的一些輿情監(jiān)控系統(tǒng)，但對中小型企業(yè)公司來說，存在成本過高、適用性差等問題。
　　針對以上情況，本文將使用爬蟲技術和搜索引擎構建一個適用于多數(shù)中小型企業(yè)公司、地方政府需要的的輿情預警分析平臺。本文對輿情預警分析平臺進行了詳細的需求分析，對其中的關鍵問題提供了解決辦法，并給出了具體的設計方案和實現(xiàn)過程。本文首先針對不同輿情信息來源網(wǎng)站的不同結構設計不同的抓取策略，設計通用的網(wǎng)絡爬蟲完成數(shù)據(jù)采集網(wǎng)絡輿情信息

3、。在研究了當前主要的幾種中文分詞算法的基礎上結合實際測試選用合適的分詞算法，并為輿情信息在搜索引擎中的存儲設計了合理的映射結構，將輿情信息或檢索內容進行分詞后，使用全文檢索引擎完成輿情信息索引和搜索;最后通過運用行業(yè)領域的概念，設計了一種垂直搜索方法，并完成網(wǎng)絡輿情管理系統(tǒng)的開發(fā)，實現(xiàn)了通用輿情監(jiān)控功能和專題監(jiān)控功能，適用于多數(shù)中小企業(yè)、政府單位對輿情監(jiān)控的需求。本平臺的爬蟲任務和輿情預警規(guī)則、專題監(jiān)控規(guī)則使用網(wǎng)絡輿情管理系統(tǒng)進行統(tǒng)一管