基于改進(jìn)Single-Pass算法的熱點(diǎn)話題發(fā)現(xiàn)系統(tǒng)的設(shè)計與實(shí)現(xiàn).pdf

1、互聯(lián)網(wǎng)從出現(xiàn)到蓬勃發(fā)展至今在人們的經(jīng)濟(jì)社會生活中發(fā)揮著越來越重要的作用與影響，這是一個前所未有的時代，我們可以在這里享受到海量的信息。然而，在當(dāng)前情況下，一方面我們能在這種大數(shù)據(jù)的情況下獲取到更多的信息，而另一方面正是因?yàn)檫@種大數(shù)據(jù)的背景使得網(wǎng)絡(luò)上的信息多而繁雜，不僅使得信息難以管理，更加大了我們管理和發(fā)現(xiàn)有價值的信息的難度。因此，擁有一種能讓用戶迅速獲取自己所需信息的工具已成為了人們的急切需求。
　　近幾年來搜索引擎的快速發(fā)展，

2、減輕了信息過載的壓力，在此項(xiàng)技術(shù)中我們一般通過輸入一些關(guān)鍵字來獲取到對自己有用的信息，但是正因?yàn)樗捎玫氖顷P(guān)鍵字匹配的技術(shù)，并且沒有對結(jié)果進(jìn)行過濾，所以返回的信息必將有很高的信息冗余度，一般只要包含有部分關(guān)鍵字的網(wǎng)頁就作為結(jié)果被進(jìn)行了返回，這使得結(jié)果中會包含很多實(shí)際不相關(guān)的網(wǎng)頁，最后我們還不得不人工去篩選自己所需的信息造成人力時間的浪費(fèi)。而對于熱點(diǎn)問題，搜索引擎就變的更無能為力，現(xiàn)在的熱點(diǎn)話題或事件一般通過網(wǎng)上投票或者一些業(yè)界人士的人工

3、篩選產(chǎn)生，因此具有一定的主觀性。
　　針對以上的問題，通過分析現(xiàn)有的技術(shù)和成果，本文設(shè)計和實(shí)現(xiàn)了以下內(nèi)容:
　　(1)本文通過對熱點(diǎn)話題發(fā)現(xiàn)的需求分析，結(jié)合相關(guān)知識構(gòu)建了熱點(diǎn)話題發(fā)現(xiàn)系統(tǒng)的整體系統(tǒng)框架，對系統(tǒng)在結(jié)構(gòu)設(shè)計及處理流程方面遇到的問題進(jìn)行了有效的解決。
　　(2)在熱點(diǎn)話題發(fā)現(xiàn)系統(tǒng)的構(gòu)建實(shí)現(xiàn)過程中本文結(jié)合了國內(nèi)外的相關(guān)技術(shù)和研究，分別對信息采集、信息預(yù)處理、話題發(fā)現(xiàn)、熱點(diǎn)話題熱度計算以及用戶管理等模塊進(jìn)行了設(shè)計